xargsで複数のコマンドを実行する

cat a.txt | xargs -I % echo %

上記の例では、xargsがecho %コマンド引数として使用されます。しかし、場合によっては、引数を処理するために、1つではなく複数のコマンドが必要になります。例えば：

cat a.txt | xargs -I % {command1; command2; ... }

しかし、xargsはこの形式を受け入れません。私が知っている1つの解決策は、コマンドをラップする関数を定義できることですが、それはパイプラインではないため、私はそれを好みません。別の解決策はありますか？

cat a.txt | xargs -d $'\n' sh -c 'for arg do command1 "$arg"; command2 "$arg"; ...; done' _

...または猫の無用な使用なし：

<a.txt xargs -d $'\n' sh -c 'for arg do command1 "$arg"; command2 "$arg"; ...; done' _

細かい点のいくつかを説明するには：

• 使用"$arg"の代わりに、%（との不在-Iでxargs、コマンドライン）は、セキュリティ上の理由からである：上のデータを渡すshのコマンドライン引数リストの代わりに、データのような（含まれている可能性があることをコード防止のコンテンツに代入$(rm -rf ~)、特にを取るために悪意のある例）コードとして実行されることから。

• 同様に、の使用は、入力ファイルの各行を個別のデータ項目として扱う-d $'\n'原因となるGNU拡張xargsです。これまたは-0（改行の代わりにNULを期待する）は、xargsが読み取るストリームにシェルのような（ただし完全にシェル互換ではない）解析を適用しないようにするために必要です。（GNU xargsがない場合は、を使用tr '\n' '\0' <a.txt | xargs -0 ...せずに行指向の読み取りを行うことができます-d）。

• _プレースホルダであるため$0、その結果によって追加された他のデータ値xargsとなる$1値の既定のセットであることを起こるれ、以降とforループが反復処理します。

GNU Parallelを使用すると、次のことができます。

cat a.txt | parallel 'command1 {}; command2 {}; ...; '

詳細については、紹介動画をご覧ください：https : //www.youtube.com/playlist?list=PL284C9FF2488BC6D1

セキュリティ上の理由から、パッケージマネージャーを使用してインストールすることをお勧めします。しかし、それができない場合は、この10秒のインストールを使用できます。

10秒のインストールでは、フルインストールが試行されます。それが失敗した場合、個人的なインストール。それが失敗した場合、最小限のインストール。

$ (wget -O - pi.dk/3 || lynx -source pi.dk/3 || curl pi.dk/3/ || \
   fetch -o - http://pi.dk/3 ) > install.sh
$ sha1sum install.sh | grep 3374ec53bacb199b245af2dda86df6c9
12345678 3374ec53 bacb199b 245af2dd a86df6c9
$ md5sum install.sh | grep 029a9ac06e8b5bc6052eac57b2c3c9ca
029a9ac0 6e8b5bc6 052eac57 b2c3c9ca
$ sha512sum install.sh | grep f517006d9897747bed8a4694b1acba1b
40f53af6 9e20dae5 713ba06c f517006d 9897747b ed8a4694 b1acba1b 1464beb4
60055629 3f2356f3 3e9c4e3c 76e3f3af a9db4b32 bd33322b 975696fc e6b23cfb
$ bash install.sh

これは、xargsもcatも使用しない別のアプローチです。

while read stuff; do
  command1 "$stuff"
  command2 "$stuff"
  ...
done < a.txt

使用できます

cat file.txt | xargs -i  sh -c 'command {} | command2 {} && command3 {}'

{} =テキストファイルの各行の変数

私が行うことの1つは、この関数を.bashrc / .profileに追加することです。

function each() {
    while read line; do
        for f in "$@"; do
            $f $line
        done
    done
}

その後、あなたは次のようなことができます

... | each command1 command2 "command3 has spaces"

これは、xargsまたは-execよりも詳細ではありません。また、その動作が必要な場合は、コマンドの任意の場所にある読み取りから値を挿入するように関数を変更することもできます。

私はドライランモードを許可するスタイルを好みます（なし| sh）：

cat a.txt | xargs -I % echo "command1; command2; ... " | sh

パイプでも動作します：

cat a.txt | xargs -I % echo "echo % | cat " | sh

パーティーに少し遅れました。

移行前に数千の小さなファイルでディレクトリを圧縮するには、以下の形式を使用します。コマンド内で単一引用符が必要ない場合は、機能するはずです。

いくつかの変更を加えると、それは誰かにとって役立つと確信しています。Cygwin（babun）でテスト済み

find . -maxdepth 1 ! -path . -type d -print0 | xargs -0 -I @@ bash -c '{ tar caf "@@.tar.lzop" "@@" && echo Completed compressing directory "@@" ; }'

find .ここを検索子
-maxdepth 1ディレクトリに移動しないでください
! -path .Exclude。/現在のディレクトリパス
-type dはディレクトリのみと一致
-print0します出力はnullバイトで区切られます\ 0
| xargsxargsへのパイプ
-0入力はnullで区切られたバイトです
-I @@プレースホルダーは@@です。@@を入力に置き換えます。
bash -c '...'Bashコマンドの実行
{...}コマンドのグループ化
&&前のコマンドが正常に終了した場合にのみ次のコマンドを実行（出口0）

final ;は重要です。それ以外の場合は失敗します。

出力：

Completed compressing directory ./Directory1 with meta characters in it
Completed compressing directory ./Directory2 with meta characters in it
Completed compressing directory ./Directory3 with meta characters in it

2018年7月の更新：

ハックが好きで遊んでいるなら、ここに興味深いものがあります：

echo "a b c" > a.txt
echo "123" >> a.txt
echo "###this is a comment" >> a.txt
cat a.txt
myCommandWithDifferentQuotes=$(cat <<'EOF'                                     
echo "command 1: $@"; echo 'will you do the fandango?'; echo "command 2: $@"; echo
EOF
)
< a.txt xargs -I @@ bash -c "$myCommandWithDifferentQuotes" -- @@

出力：

command 1: a b c
will you do the fandango?
command 2: a b c

command 1: 123
will you do the fandango?
command 2: 123

command 1: ###this is a comment
will you do the fandango?
command 2: ###this is a comment

説明：
-単一ライナースクリプトを作成し、変数に格納
- xargs読み込むa.txtようにして実行bashするスクリプト
- @@行全体が渡されたことを確認するたびになります
-パッティング@@後に--なりますが、確か@@に、位置パラメータ入力としているbashコマンドではなく、bashスタートOPTION、すなわち-cそれ自体が意味するようにrun command

--魔法です、それは他の多くのもので、すなわちssh、kubectl

これが最も安全なバージョンのようです。

tr '[\n]' '[\0]' < a.txt | xargs -r0 /bin/bash -c 'command1 "$@"; command2 "$@";' ''

（-0除去することができ、trリダイレクト（またはファイルと置き換えがNULLに置き換えることができる）の代わりにファイルを分離した。私が主に使用するので、それはそこに主にあるxargsとfindして-print0出力）（これも上の関連するかもしれないxargs無しバージョン-0拡張）

argsは実行時にパラメータを配列としてシェルに渡すため、安全です。シェル（少なくともbash）は、すべてを使用して取得したときに、変更されていない配列として他のプロセスに渡します["$@"][1]

を使用...| xargs -r0 -I{} bash -c 'f="{}"; command "$f";' ''する場合、文字列に二重引用符が含まれていると割り当てが失敗します。これは、-iまたはを使用するすべてのバリアントに当てはまります-I。（文字列に置き換えられるため、予期しない文字（引用符、バッククォート、ドル記号など）を入力データに挿入することで、いつでもコマンドを挿入できます）

コマンドが一度に1つのパラメーターしか取らない場合：

tr '[\n]' '[\0]' < a.txt | xargs -r0 -n1 /bin/bash -c 'command1 "$@"; command2 "$@";' ''

またはやや少ないプロセスで：

tr '[\n]' '[\0]' < a.txt | xargs -r0 /bin/bash -c 'for f in "$@"; do command1 "$f"; command2 "$f"; done;' ''

GNU xargsまたはその他の-P拡張機能があり、32のプロセスを並行して実行する場合、各プロセスのパラメーターはそれぞれ10以下です。

tr '[\n]' '[\0]' < a.txt | xargs -r0 -n10 -P32 /bin/bash -c 'command1 "$@"; command2 "$@";' ''

これは、入力の特殊文字に対して堅牢でなければなりません。（入力がnullで区切られている場合。）tr改行が含まれている行がある場合、バージョンは無効な入力を取得しますが、改行で区切られたファイルではそれが避けられません。

の空白の最初のパラメーターbash -cはこれが原因です：（bashmanページから）（ありがとう@clacke）

-c   If the -c option is present, then  commands  are  read  from  the  first  non-option  argument  com‐
     mand_string.   If there are arguments after the command_string, the first argument is assigned to $0
     and any remaining arguments are assigned to the positional parameters.  The assignment  to  $0  sets
     the name of the shell, which is used in warning and error messages.

私にとってうまくいく別の可能な解決策は次のようなものです-

cat a.txt | xargs bash -c 'command1 $@; command2 $@' bash

最後の「bash」に注意してください-私はそれがargv [0]としてbashに渡されると想定しています。この構文にそれがないと、各コマンドの最初のパラメーターは失われます。どんな言葉でもいいです。

例：

cat a.txt | xargs -n 5 bash -c 'echo -n `date +%Y%m%d-%H%M%S:` ; echo " data: " $@; echo "data again: " $@' bash

このための私の現在のBKMは

... | xargs -n1 -I % perl -e 'system("echo 1 %"); system("echo 2 %");'

これがperlを使用していることは残念ですが、これはbashよりもインストールされる可能性が低くなります。しかし、受け入れられた回答よりも多くの入力を処理します。（perlに依存しないユビキタスバージョンを歓迎します。）

@KeithThompsonの提案

 ... | xargs -I % sh -c 'command1; command2; ...'

素晴らしい-入力にシェルコメント文字＃がない場合、最初のコマンドの一部と2番目のコマンドのすべてが切り捨てられます。

入力がlsやfindなどのファイルシステムリストから派生し、エディターが名前に＃を含む一時ファイルを作成する場合、ハッシュ＃は非常に一般的です。

問題の例：

$ bash 1366 $>  /bin/ls | cat
#Makefile#
#README#
Makefile
README

おっと、ここに問題があります：

$ bash 1367 $>  ls | xargs -n1 -I % sh -i -c 'echo 1 %; echo 2 %'
1
1
1
1 Makefile
2 Makefile
1 README
2 README

ああ、それは良いです：

$ bash 1368 $>  ls | xargs -n1 -I % perl -e 'system("echo 1 %"); system("echo 2 %");'
1 #Makefile#
2 #Makefile#
1 #README#
2 #README#
1 Makefile
2 Makefile
1 README
2 README
$ bash 1369 $>