パフォーマンステストを繰り返すためにファイルキャッシュをクリアする

キャッシュされたファイルのコンテンツを削除して、パフォーマンス結果の偏りを防ぐために使用できるツールまたはテクニックは何ですか？ファイルとディレクトリの内容に関するキャッシュされた情報を完全にクリアするか、選択的に削除する必要があると思います。

私が開発しているアプリケーションは、専用の圧縮ユーティリティであり、オペレーティングシステムが最近変更していないファイルの読み取りや書き込みが多く、ディスクブロックがキャッシュされない可能性があります。

ファイル処理作業を行うためのさまざまな戦略をプロファイリングするタスクを繰り返すときに、IO時間に見られる変動を取り除きたいと思います。

私は主にWindows XPのソリューションに興味があります。それは私の主な開発マシンであるためですが、Linuxを使用してテストすることもできるので、その環境に対する回答にも興味があります。

SysInternals CacheSetを試しましたが、[クリア]をクリックしても、数回読んだばかりのファイルを再度読み取る時間は、測定可能なほどには増加しません（コールドブート後のタイミングへの復元）。

SysInternalのRAMMapアプリを使用します。

[空/スタンバイリストを空にする]メニューオプションは、Windowsファイルキャッシュをクリアします。

Windows XPの場合、FILE_FLAG_NO_BUFFERINGオプションを指定したCreateFileを使用してファイルを開き、ハンドルを閉じることにより、特定のファイルのキャッシュをクリアできるはずです。これは文書化されておらず、それ以降のバージョンのWindowsで動作するかどうかはわかりませんが、ファイル圧縮ライブラリを比較するためのテストコードを作成するときにこれをずっと前に使用しました。読み取りまたは書き込みアクセスがこのトリックに影響を与えたかどうかは覚えていません。

迅速なグーグルでLinuxにこれらのオプションを提供

1. ファイルを保持しているパーティションをアンマウントしてマウントします
2. sync && echo 1 > /proc/sys/vm/drop_caches

コマンドラインユーティリティはここにあります

ソースから：

EmptyStandbyList.exe 空にすることができるWindows（Vista以降）用のコマンドラインツールです。

• プロセスワーキングセット
• 変更されたページリスト
• スタンバイリスト（優先度0〜7）、または
• 優先度0のスタンバイリストのみ。

使用法：

EmptyStandbyList.exe workingsets|modifiedpagelist|standbylist|priority0standbylist

 #include <fcntl.h>

int posix_fadvise(int fd, off_t offset, off_t len, int advice);

アドバイスオプションありPOSIX_FADV_DONTNEED：
指定されたデータは近い将来アクセスされません。

機能しているように見える（再起動以外の）手法を1つ見つけました。

1. MemAllocのコピーをいくつか実行します
2. それぞれに、大きなメモリのチャンクを数回割り当てます
3. プロセスエクスプローラーを使用して、システムキャッシュサイズが非常に低いレベルに減少していることを確認します。
4. MemAllocプログラムを終了します。

ただし、選択的ではありません。理想的には、キャッシュされないようにするファイルのディスクブロックをキャッシュするために使用されているメモリの特定の部分をクリアできるようにしたいと考えています。

Windows XPファイルシステムキャッシュのより良いビューについて-Tim MurgentによるATMを試してください-ファイルシステムキャッシュのワーキングセットサイズとスタンバイリストサイズの両方をより詳細かつ正確なビューで確認できます。Windows XPの場合-V2およびV3にはServer 2003、Vista 以降が必要であるため、ここからダウンロードできる古いバージョンのATMが必要です。

あなたはただしことを確認しますSysinternalsのCachesetは、実際のデータはまだそれが何か他のものに交換するまで、それは使用することができ、そこからスタンバイリストの形で存在し続けて- 「キャッシュWS分を」削減されます。次に、それを別のものに置き換えるには、MedAllocやChad Austinのflushmemなどのツールを使用するか、Windows Server 2003リソースキットツールの Consume.exeを使用します。

Linuxにも質問されたので、関連する回答があります。

コマンドラインツールvmtouchを使用すると、システムファイルキャッシュからファイルやディレクトリを追加および削除できます。

ファイルシステムキャッシュをフラッシュするために使用できるWindows APIコールhttps://docs.microsoft.com/en-us/windows/desktop/api/memoryapi/nf-memoryapi-setsystemfilecachesizeがあります。また、キャッシュサイズを非常に小さな値に制限するためにも使用できます。これらの種類のテストに最適です。