xargsを使用したシェル関数の呼び出し

xargsを使用して、より複雑な関数を並列に呼び出そうとしています。

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
seq -f "n%04g" 1 100 |xargs -n 1 -P 10 -i echo_var {} 
exit 0

これはエラーを返します

xargs: echo_var: No such file or directory

これを達成するためにxargsをどのように使用できるか、またはその他の解決策に関するアイデアがあれば歓迎します。

関数のエクスポートはそれを行うべきです（テストされていません）：

export -f echo_var
seq -f "n%04g" 1 100 | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

printf外部の代わりに組み込みを使用することができますseq：

printf "n%04g\n" {1..100} | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

また、そのようなものを使用するreturn 0とexit 0、その前のコマンドによって生成される可能性のあるエラー値がマスクされます。また、エラーがなければ、これがデフォルトであり、多少冗長です。

@phobicは、Bashコマンドを次のように簡略化できると述べています

bash -c 'echo_var "{}"'

その中に{}直接移動します。しかし、それはだ、コマンドインジェクションの脆弱性 @Sashaで指摘したように。

埋め込み形式を使用してはならない例を次に示します。

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "{}"'
Sun Aug 18 11:56:45 CDT 2019

なぜそうでないかの別の例：

echo '\"; date\"' | xargs -I {} bash -c 'echo_var "{}"'

これは安全なフォーマットを使用して出力されるものです：

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "$@"' _ {}
$(date)

これは、注入を回避するためにパラメータ化された SQL クエリを使用することに相当します。

私が使用しているdateコマンド置換またはエスケープ引用符ここの代わりにrm、それは非破壊ですので、サーシャさんのコメントで使用されるコマンド。

GNU Parallelを使用すると、次のようになります。

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
export -f echo_var
seq -f "n%04g" 1 100 | parallel -P 10 echo_var {} 
exit 0

バージョン20170822を使用しているexport -f場合は、これを実行している限りは必要ありません。

. `which env_parallel.bash`
seq -f "n%04g" 1 100 | env_parallel -P 10 echo_var {} 

このようなものも機能するはずです：

function testing() { sleep $1 ; }
echo {1..10} | xargs -n 1 | xargs -I@ -P4 bash -c "$(declare -f testing) ; testing @ ; echo @ "

多分これは悪い習慣ですが、.bashrcまたは他のスクリプトで関数を定義している場合は、ファイルまたは少なくとも関数定義を次の設定でラップできますallexport。

set -o allexport

function funcy_town {
  echo 'this is a function'
}
function func_rock {
  echo 'this is a function, but different'
}
function cyber_func {
  echo 'this function does important things'
}
function the_man_from_funcle {
  echo 'not gonna lie'
}
function funcle_wiggly {
  echo 'at this point I\'m doing it for the funny names'
}
function extreme_function {
  echo 'goodbye'
}

set +o allexport