あなたはc5d.9xlarge
付属しています900ギガバイトのインスタンスストレージ(別名はかないストレージ) -あなたはそれを使用しているファイルを格納して処理しますか?インスタンスには専用のEBS帯域幅がありますが、インスタンス上のSSDストレージはさらに高速です。すべてのソースファイルと一時ファイルに使用し、結果をEBSにのみ保存することをお勧めします。
ただし、インスタンスストレージにはいくつかの注意事項があります。
使用する前にフォーマットしてマウントする必要があります。詳細については、この回答を参照してください。SSDインスタンスストレージをUbuntu 16.04のAWS EC2に自動的にマウントする
インスタンスを停止して再起動すると、内容は消去されます。再起動後は停止しますが、停止/開始はできません。
更新:デフォルトではSSDはマウントされていません-それを利用するには、上記のリンクされた回答の手順に従う必要があります。ブート後の標準構成では、SSDよりも遅いEBSを使用します。
そして、あなたが実際にしていることを確認する必要があります、それを使用して設定- アップロードし、作業し、一時ディレクトリそのSSDマウントポイントに。
またはさらに良い-72 GBのRAMがあるので、RAMディスクを作成し、それを一時ファイルに使用します。SSDよりも高速です(ファイルが適合する場合)。
まず、アップロード速度を無視して処理を最適化します。ファイルをEBSにアップロードして処理時間を計り、次にSSDにアップロードして時間を計り、次にRAMディスクに入れて処理時間を計ります。それらがどれほど異なるかを見てください。
アップロード速度は、あなたとアップロード先のAWSリージョンとの間の距離や待ち時間など、多くの側面の影響を受けます。近くのAWSリージョンを使用していますか?
再CPU性能 -あなたが利用できる36個のCPUを持っている、しかし、各単一コアがあり、あなたの前の12コアのマシンでは遅く、コアよりも。CPUアーキテクチャとクロック速度に依存します。ただし、ビデオ処理を36スレッドに並列化できる場合は、このインスタンスを使用することをお勧めします。単一のスレッドに依存している場合、希望するパフォーマンスが得られない場合があります。
それが役立つことを願っています:)