複数のbashスクリプトを呼び出して、順番にではなく並行して実行する

：私は3つ（またはそれ以上）のbashスクリプトを持っていると仮定しscript1.sh、script2.shとscript3.sh。これら3つすべてのスクリプトを呼び出して、並行して実行したいと思います。これを行う1つの方法は、次のコマンドを実行することです。

nohup bash script1.sh &
nohup bash script2.sh &
nohup bash script3.sh &

（一般に、スクリプトの終了には数時間または数日かかる可能性があるためnohup、コンソールが閉じても実行し続けるように使用したいと思います。）

しかし、これら3つのコマンドを1 回の呼び出しで並行して実行する方法はありますか？

私は次のようなものを考えていました

nohup bash script{1..3}.sh &

しかし、これは、ではなく、、、およびを順番に実行するようscript1.shに見えます。script2.shscript3.sh

for((i=1;i<100;i++)); do nohup bash script${i}.sh & done

より良い方法は、GNU Parallelを使用することです。GNUパラレルは単純であり、それを使用すると、ジョブをより細かく制御して、並行して実行するジョブの数を制御できます。

以下のコマンドでscript{1..3}.shは、展開され、引数としてbash並行して送信されます。ここで-j0は、できるだけ多くのジョブを実行する必要があることを示しています。デフォルトでparallelは、1つのCPUコアに対して1つのジョブを実行します。

$ parallel -j0 bash :::: <(ls script{1..3}.sh)

また、使用してみることができます

$ parallel -j0 bash ::: script{1..3}.sh

エラーメッセージが表示された場合、2番目のメソッドの実行中に--tollefオプションが設定され/etc/parallel/config、削除する必要があり、すべてが正常に機能することを意味します。

あなたは読むことができGNU Parallelsmanページをここでより豊かなオプションについて。

また、リモートマシンからジョブを実行している場合は、screenネットワークの問題によりセッションが閉じられないように使用することをお勧めします。nohupasは最近のバージョンのbashに付属してhuponexitおりoff、これにより、親シェルHUPが終了中に子にシグナルを送信できなくなります。設定されていない場合は

$ shopt -u huponexit  

また、xargs複数のスクリプトを並行して実行するために使用できます。

$ ls script{1..5}.sh|xargs -n 1 -P 0 bash

ここで、各スクリプトは引数として個別にbashに渡されます。-P 0並列プロセスの数を可能な限り多くできることを示します。bash defaultを使用する方が安全ですjob control feature (&)。

単一行ソリューション：

$ nohup bash script1.sh & nohup bash script2.sh & nohup bash script3.sh &

面倒なことはせず、ラッパースクリプトを使用します。

$ cat script.sh
#!/usr/bin/env bash
script1.sh &
script2.sh &
script3.sh &
$ nohup script.sh &

またはそれらをループします：

for script in dir/*.sh
do
    nohup bash "$script" &
done

タイピングの労力を節約したい場合

eval "nohup bash "script{1..3}.sh" &"

または考え直して、多分そうではない

このツールをチェックアウトします：https : //github.com/wagoodman/bashful

あなたが持っているmytasks.yamlと言います

tasks:
    - name: A title for some tasks
      parallel-tasks:
        - cmd: ./script1.sh
        - cmd: ./script2.sh -x an-arg
        - cmd: ./script3.sh -y some-other-arg

そして、あなたはそれを次のように実行します：

nohup bashful run mytasks.yaml

スクリプトは、垂直プログレスバーと並行して実行されます（以前に実行したことがあり、時間が確定的である場合は、+ eta）。ここで指定された3つ以上のタスクを実行し始める場合、並行して実行するタスクの数を微調整できます。

config:
    max-parallel-commands: 6
tasks:
    ...

免責事項：私は著者です。

書いたばかりのもっとシンプルなユーティリティを提案しています。現在はparと呼ばれていますが、まもなくparlまたはpllに名前が変更されますが、まだ決定されていません。

https://github.com/k-bx/par

APIは次のように簡単です。

par "script1.sh" "script2.sh" "script3.sh"

Parallelshellを使用する

parallelshell "echo 1" "echo 2" "echo 3"

https://github.com/keithamus/parallelshell