大量の共有ファイルにアクセスする方法は？

私は、シミュレーションに協力するエンジニアグループの一員です。シミュレーション出力ファイルを保存/アクセスする方法を見つけるのに問題があります。

• 各シミュレーションスタディは、最大20GBの出力ファイルを生成します。現在、1週間に1〜2件の調査を実施しています。
• シミュレーション出力ファイルは、複数のローカルコンピューターから読み取り/書き込みアクセスできる必要があります。
• 調査のファイルは、数年間アクセス可能である必要があります。
• 当社は小規模で、IT予算/サポートは限られています。

過去に、ローカルコンピューターの1つにシミュレーション出力を保存して他のコンピューターとディレクトリを共有するか、ローカルコンピューターのドライブとしてマウントできるネットワークの場所にシミュレーション出力を保存しました。どちらのソリューションもスペース不足です。

このデータ量を共有/アクセスするためにどのようなアプローチが理にかなっていますか？

52週間、1週間に2つの研究を想定すると、1年に2テラバイトのデータになります。それは大量のデータです。

古いデータにすぐにアクセスする必要がある場合、Amazon S3のようなリモートストレージは適切なソリューションではありません。ただし、長期間にわたって大量のデータをダウンロードすることを気にしない場合は、安価で冗長なソリューションになる可能性があります。

すぐにアクセスするには、ローカルストレージが必要です。ネットワーク接続ストレージ（NAS）デバイスが適しています。また、予算が限られているため、1年に1台のデバイスを追加できます。このようなデバイスが機能します。1つをセットアップすると、さらに多くのストレージが必要になったときに、別のストレージを購入できます。明らかに、選択すれば大容量のデバイスを購入できます。

私がお勧めすることの1つは、コストはかかりますが、RAIDサポートのあるデバイスを入手することです。RAIDは、ドライブが故障した場合に冗長性を提供します-つまり、データを失うことはありません。

個人的には、有名ブランドのNASデバイスを使用します。彼らはより多くの費用がかかりますが、何かが壊れた場合、あなたはより良いサポートを得る可能性が高くなります。私は人々がそれらにあまりにも多くの問題を抱えているのを見るので、私はより安いモデルから恥ずかしがり屋です。あなたはあなたが支払うものを手に入れます。

また、NASデバイスにローカルコピーを保持し、クラウドのAmazon Glacierのような低コストで低速のストレージにデータをバックアップすることも検討する必要があります。バックアップはあなたの友達です。