空きメモリの90％を埋める方法は？

リソースの少ないテストをいくつか行いたいので、そのために空きメモリの90％をいっぱいにする必要があります。

*nixシステムでこれを行うにはどうすればよいですか？

stress-ngは、POSIXシステムでのcpu / mem / io / hddストレスをシミュレートするワークロードジェネレーターです。この呼び出しは、Linux <3.14でトリックを実行する必要があります。

stress-ng --vm-bytes $(awk '/MemFree/{printf "%d\n", $2 * 0.9;}' < /proc/meminfo)k --vm-keep -m 1

Linux> = 3.14の場合、MemAvailable代わりに、スワッピングなしで新しいプロセスに使用可能なメモリを推定するために使用できます。

stress-ng --vm-bytes $(awk '/MemAvailable/{printf "%d\n", $2 * 0.9;}' < /proc/meminfo)k --vm-keep -m 1

/ / etcを使用/proc/meminfoして呼び出しを調整します。ポータブルが必要な場合。free(1)vm_stat(1)

Cプログラムをmalloc()必要なメモリに書き込んでmlock()から、メモリがスワップアウトされるのを防ぐために使用できます。

次に、プログラムにキーボード入力を待機させ、メモリのロックを解除し、メモリを解放して終了します。

メモリが限られているVMを実行してソフトウェアをテストすることは、ホストマシンのメモリをいっぱいにするよりも効率的なテストになることをお勧めします。

また、この方法には、メモリ不足の状況により他の場所でOOMエラーが発生してOS全体がハングする場合、他の有用なプロセスが実行されているマシンではなく、テストするVMのみがハングするという利点があります。

また、テストがCPUまたはIOを集中的に使用しない場合、さまざまな低メモリサイズのVMファミリでテストのインスタンスを同時に実行できます。

このHNコメントから：https : //news.ycombinator.com/item?id=6695581

/ dev / shmにddなどを入力するだけです。

swapoff -a
dd if=/dev/zero of=/dev/shm/fill bs=1k count=1024k

1. Linuxを実行します。
2. でブートmem=nn[KMG]カーネルブートパラメータ

（詳細については、linux / Documentation / kernel-parameters.txtを参照してください）。

あなたは、基本的なGNUツール持っている（場合はsh、をgrep、yesとhead）あなたはこれを行うことができます。

yes | tr \\n x | head -c $BYTES | grep n
# Protip: use `head -c $((1024*1024*2))` to calculate 2MB easily

これは、grepがRAMのデータ行全体をロードするために機能します（ディスクイメージをgrepするときに、これはかなり残念な方法で学習しました）。で生成された行は、yes改行を置き換えて無限に長くheadなり$BYTESますが、バイトに制限されているため、grepはメモリに$ BYTESをロードします。Grep自体は100-200KBを使用しますが、より正確な量を得るにはそれを差し引く必要があるかもしれません。

時間制約も追加したい場合、これは非常に簡単に実行できますbash（では機能しませんsh）。

cat <(yes | tr \\n x | head -c $BYTES) <(sleep $NumberOfSeconds) | grep n

この<(command)ことはほとんど知られていないようですが、多くの場合非常に便利です。詳細については、http：//tldp.org/LDP/abs/html/process-sub.htmlを参照してください。

次に、cat：catを使用するために、終了するまで入力が完了するのを待ち、パイプの1つを開いたままにしておくと、grepが存続します。

pvRAMの使用を徐々に増やしたい場合：

yes | tr \\n x | head -c $BYTES | pv -L $BYTESPERSEC | grep n

例えば：

yes | tr \\n x | head -c $((1024*1024*1024)) | pv -L $((1024*1024)) | grep n

毎秒1MBの速度で最大1ギガバイトを使用します。追加ボーナスとして、pv現在の使用率とこれまでの合計使用量が表示されます。もちろん、これは以前のバリアントでも実行できます。

yes | tr \\n x | head -c $BYTES | pv | grep n

| pv |パーツを挿入するだけで、現在のステータスが表示されます（デフォルトでは、スループットと合計、そうでない場合はman（ual）ページを参照してください）。

なぜ別の答えですか？受け入れられた答えは、パッケージのインストールを推奨しています（パッケージマネージャーを必要とせずにすべてのチップセットのリリースがあるはずです）。上位の回答では、Cプログラムのコンパイルを推奨しています（ターゲットプラットフォーム用にコンパイルするためのコンパイラまたはツールチェーンがインストールされていませんでした）。2番目に上位に選ばれた回答では、VMでアプリケーションを実行することを推奨しています（そう、この電話の内部SDカードをusbなどでddし、virtualboxイメージを作成します）。3番目は、ブートシーケンスで、必要に応じてRAMを一杯にしないものを変更することを提案しています。4番目は/ dev / shmマウントポイント（1）が存在し、（2）が大きい場合にのみ機能します（再マウントにはルートが必要です）。5番目は、サンプルコードなしで上記の多くを組み合わせています。6番目は素晴らしい答えですが、私は自分のアプローチを考え出す前にこの答えを見ませんでした、だから、私は自分で追加しようと思った。それは、memblob行が実際に問題の核心であることがわからない場合、覚えたり入力したりするのが短いからだ。7番目もまた質問に答えません（代わりにulimitを使用してプロセスを制限します）。8番目は、pythonのインストールを試みます。9人目は私たちは皆非常に創造的ではないと考え、最後に10人目は彼自身のC ++プログラムを作成しました。

私は、ドットファイルで似たようなことをする関数を保持しています。 https://github.com/sagotsky/.dotfiles/blob/master/.functions#L248

function malloc() {
  if [[ $# -eq 0 || $1 -eq '-h' || $1 -lt 0 ]] ; then
    echo -e "usage: malloc N\n\nAllocate N mb, wait, then release it."
  else 
    N=$(free -m | grep Mem: | awk '{print int($2/10)}')
    if [[ $N -gt $1 ]] ;then 
      N=$1
    fi
    sh -c "MEMBLOB=\$(dd if=/dev/urandom bs=1MB count=$N) ; sleep 1"
  fi
}

単純なpythonソリューションはどれほどありますか？

#!/usr/bin/env python

import sys
import time

if len(sys.argv) != 2:
    print "usage: fillmem <number-of-megabytes>"
    sys.exit()

count = int(sys.argv[1])

megabyte = (0,) * (1024 * 1024 / 8)

data = megabyte * count

while True:
    time.sleep(1)

ramfsが存在する場合はどうですか？マウントして大きなファイルにコピーしますか？/dev/shmramfsがまったくない場合-入力値に基づいて大きなmallocを実行する小さなCプログラムですか？大量のメモリを搭載した32ビットシステムで一度に数回実行する必要がある場合があります。

限られたメモリで特定のプロセスをテストしたい場合ulimitは、割り当て可能なメモリの量を制限するために使用した方が良いかもしれません。

これは、最も創造的な答えを求めて競争する人々によって間違った質問と正気が失われていることを尋ねる場合だと思います。OOM条件のみをシミュレートする必要がある場合は、メモリをいっぱいにする必要はありません。カスタムアロケーターを使用し、一定数の割り当て後に失敗するようにします。このアプローチは、SQLiteで十分に機能するようです。

そのためにこの小さなC ++プログラムを作成しました：https : //github.com/rmetzger/dynamic-ballooner

この実装の利点は、メモリを解放または再割り当てする必要があるかどうかを定期的にチェックすることです。