を使用R
して、平均値、標準偏差、その他の興味深い値をすばやく計算できます。
たとえば、GNU時間を使用して、いくつかのランタイム測定値をCSVファイルに書き込むことができます。
function measure
{
f=$1; shift
n=$2; shift
echo wall,user,sys,rss > "$f"
for i in $(seq $n); do
/usr/bin/time --output "$f" --append --format '%e,%U,%S,%M' "$@" >/dev/null
done
}
次に、次のようにRを使用して値を生成できます。
Rscript --vanilla -e "b=read.csv(file='$f');summary(b);sapply(b, sd);"
R出力のきれいな印刷も行う小さなベンチマークスクリプトを作成しました。たとえば:
$ benchmark.sh 100 ./some_prog arg1 arg2
n=100 | min | Q1 | med | mean | Q3 | max | std
wall | 0.0400 | 0.0400 | 0.0500 | 0.0471 | 0.0500 | 0.0800 | 0.00624
user | 0.0400 | 0.0400 | 0.0400 | 0.0426 | 0.0400 | 0.0700 | 0.00562
sys | 0 | 0 | 0 | 0 | 0 | 0 | 0.00000
rss | 2608 | 2657 | 2704 | 2728 | 2764 | 2920 | 95.06524
os.system()
、各コマンドでシェルを呼び出したり作成したりするオーバーヘッドが発生します。おそらくsubprocess.call()を使用した方が良い