シェルスクリプトで繰り返し数nあるfor文の中身をn並列化

Question

シェルスクリプトで繰り返し数がn個あるfor文について、n並列化して、処理速度をあげたいと考えてます。

具体的には以下のとおりです。

for x in ${xs[@]}
処理a
処理b
do

• xsにはn個の成分が入ってます
• 処理bは処理aの後に実行する必要があります。

以上のスクリプトを実行すると、${xs}の1つ目, 2つ目, ..., n個目と処理が進みます。

これを、1つ目, 2つ目、...,n個目の処理を同時に処理(n並列)したいのですが、何か良い方法はありますでしょうか？

Answer 1

xargsで並列を行ったらどうでしょうか

-I@を指定してるので、一つ一つの要素は@に代入されます。

echo ${xs[@]}|xargs -n1 -I@ -P<並列数> bash -c "処理a; 処理b;"

例

$ xs=(1 2 3 4 5 6 7)
$ echo ${xs[@]}|xargs -n1 -I@ -P3 bash -c "echo @; sleep 1; echo $((@*10));"
1
2
3
10
20
30
4
5
6
40
50
60
7
70