Blue Watersの一般的なジョブは、マシンの約10%を使用し、合計75 ノード時間を消費します。Blue Watersには約27500のノードがあるため、これらの「75ノード時間」ジョブの一部はわずか数分で実行されます。これにより、科学者はマシンをある程度インタラクティブに使用できます。(移動平均はここで見ることができます:http : //xdmod.ncsa.illinois.edu/#tg_usage : group_by_Jobs_none)
スーパーコンピューターは、小さなコンピューターの単なる大きなコレクションです。1つの場所にまとめて収集する主な理由は、その方法で最も効率的にコストを共有できるからです。多くの作業を実行できるコンピューターを作成しようとしていますが、そのために総所有コスト(コンピューター、電力、およびメンテナンスの総コスト)がコンピューターの寿命にわたって最小化されます。
総所有コストには、いくつかの要因が関係します。機器のコストは1つです。所有コストを最小限に抑えるには、機器が燃え尽きるまで、可能な限り多くの時間(理想的には100%、現実的にはやや少なく、95%が良いと見なされるなど)、機器が有用な作業を行うようにします。または廃止されます。対照的に、ラップトップまたは携帯電話のコンピューターは、実際に所有している時間の10%未満しか実際に使用されていません(眠っている時間は33%、起きている時間の約半分を食べてリラックスしている、コンピュータを「使用」しているときでも、ほとんどの時間プロセッサはアイドル状態です。)
2つ目は電力のコストです。これにはいくつかの部分があります。最初は電力自体のコストです。そのコストの一部は、発電所からコンピューターへの電力輸送に費やされます。その一部は、コンピューターの「電源」(AC電源をDC電源に変換するだけ)で失われます。通常、より大きなAC-> DCコンバーターをより効率的にすることができます。さらに、コンピューターは有用な電力を廃熱に変えます。そのため、熱を除去するための支払いも必要です。繰り返しますが、通常、大型のエアコンは、複数の小型エアコンよりも効率的にすることができます。
3番目は、メンテナンスのコストです。多数のコンピューターをまとめて、残りのコンピューターが稼働し続けるように設計することにより、ノードがすべて異なり、異なる建物に配置されている場合よりもはるかに多くのコンピューターノードでメンテナンススタッフのコストを償却できます(または都市)。
詳細:ブルーウォーターズには288のキャビネットがあります。各キャビネットには96個の「ノード」があります。各ノードはごく普通のハイエンドコンピューターです。ほとんどのノードには、2.3GHzで動作する2つのAMD Opeteron 6276プロセッサーと64GバイトのDRAMが搭載されています。代わりに、ノードの約1/6に、単一のAMD Opteron 6276、NVidia K20 GPU、および38GByteのDRAMがあります。あなたが望んでいた場合は、程度のために、「ノード」に似た何かを買うことができる$ 3000 $ 4000およびビデオゲームをプレイするあなたのリビングルームに置きます。Blue Watersには約27648のノードがあります。 https://bluewaters.ncsa.illinois.edu/hardware-summary
各ノードはおそらく500ワット以上を消費し、その電力を熱に変えます。リビングルームにビデオゲームをプレイするノードがあれば、それほど大したことではないでしょう。それは壁のコンセントからいくらかの電気を消費し、小さな個人用スペースヒーターと同じくらいの熱を発生します。冬には、それは一種の素敵で居心地の良いものになるでしょう。夏には、家を快適に保つために、より頻繁にエアコンを運転する必要があります。毎日一日中フルパワーで稼働していると、電気代が大幅に上がり、おそらく現在消費している電力の2倍になります。
しかし、27648個を組み合わせると、約15メガワットを消費し、それに応じて大量の熱が発生します。Blue Watersの真のエンジニアリングの驚異は、他の大規模なデータセンターと同様、建物そのものです。それは巨大な冷蔵ボックスです。ブルーウォーターズの建物は、非常に効率的であるため、特に興味深いものです。建物に入る電力の約85%が実際にノードの実行に使用されます。私はどこかを読んでいると信じています(現時点では見つかりません)。電力変換と廃熱の除去で失われるのは15%だけです。これは、リビングルームの500 Wゲーミングコンピューターから得られるものよりもはるかに優れています。エアコンを作動させるには、おそらく750Wの「電源」と数百ワットが必要でしょう。
TL; DR
すべてまとめましょう。数千台の小さなコンピューターをまとめ、多くの人々に使用を広げることで、ほとんどの時間、それらのコンピューターを実行し続け、非常に効率的な方法でリソースを共有します。ほとんどの場合、アイドル状態のコンピューターを使用するには多くの費用がかかります。計算でお金を節約する最良の方法は、ほとんどの場合コンピューターが混雑するようにコンピューターを共有することです。
Blue Watersは、内部のコンピューターだけではありません。可能な限り電力効率がよくなるように特別に設計されています。その一部には、送電線の電力損失を減らすために発電所の近くに置くことが含まれます。以下は、シャンペーンイリノイ州のブルーウォーターズを含む一部の衛星写真です。