HN 日本語サマリー

← 一覧へ戻る
インフラ・DevOps

45℃冷却設計によりデータセンターの電力消費を劇的に削減し水使用量をほぼゼロに

45°C cooling design cuts data center water use to near zero (blogs.nvidia.com)

80 pointsby nitin_flanker56 コメント

要約

NVIDIAの新しいAIサーバーは、冷却液を最高45℃で稼働させる100%液冷システムを採用し、データセンターの冷却エネルギー消費と水使用量を大幅に削減します。この「Rubin世代」のAIインフラは、ドライクーラーベースの設計により、従来の冷却塔システムと比較して水使用量をほぼゼロにし、最大40%を占めていた冷却コストも削減します。これにより、高密度なAIワークロードの効率的な運用と持続可能性が向上します。

全文翻訳

お風呂より熱い:AIの巨大マシンを冷却する45℃のブレークスルー

ホットタブは約38~40℃ですが、ほとんどの人が15分程度しか浸かっていられません。NVIDIAの最新AIサーバーは、冷却液をさらに高温、最大45℃(華氏113度)で稼働させることができます。この高い温度制限こそが、エネルギー効率を高める理由なのです。

NVIDIAのAIインフラのルビン世代は、世界で初めて100%液体冷却を実現しました。すべてのチップ、すべてのネットワークコンポーネントが、システム内のファンを一切使用しない閉ループの液体によって完全に冷却されます。この液体冷却手法は、AIファクトリーのインフラスタック全体を設計、構築、運用するためのベストプラクティスを概説したNVIDIA DSXリファレンスデザインで詳述されています。

世代ごとにワットあたりのコンピューティングパワーが大幅に向上していますが、完全液体冷却AIコンピューティングインフラストラクチャにより、データセンターは冷却エネルギー消費を劇的に削減できます。これは、ハイパースケールにおけるデータセンター全体のエネルギー使用量に大きな違いをもたらします。

「AIファクトリー向けのNVIDIA DSXリファレンスデザインは、水の使用量がゼロです。私たちは大量の電力消費と、ほぼすべての水の使用を排除しました」と、NVIDIAのデータセンター冷却・インフラ担当ディレクターであるAli Heydari氏は述べています。「ドライクーラーベースの設計では、閉ループシステムであり、蒸発冷却はありません。一部の気候では、年間を通じて1%程度の期間、チラーが必要になる場合があるかもしれませんが。」

歴史的に、冷却だけでデータセンターの電力消費の最大40%を占めており、運用コストとエネルギー需要の両方を削減できる効率改善の最も重要な分野の1つとなっています。

業界の推定によると、チラープラントの温度を1度上げるだけで、冷却エネルギーコストを約4%削減できます。規模が大きくなると、その節約効果は急速に積み上がります。50メガワットのハイパースケール施設では、液体冷却インフラストラクチャに移行することで、冷却関連のエネルギーおよび水コストで年間400万ドル以上を節約できます。

有利な気候では、NVIDIAの45℃液体冷却アーキテクチャにより、ドライクーラーを使用したチラー不要の運用が可能になり、従来の冷却塔ベースのシステムで年間1メガワットあたり約260万ガロンに達する施設冷却水消費量を、ほぼゼロに削減できます。これは水使用量を最大100%削減することになります。

その理由は、従来の空冷データセンターは、IT機器から熱を除去するために大量の冷却空気を使用しており、暑い時期にはエネルギー集約型の冷却インフラストラクチャを必要とすることが多いからです。NVIDIAの45℃液体冷却では、熱はチップで直接捕捉され、はるかに高い温度で稼働する液体ループを介して輸送されます。これにより、屋外のドライクーラーが年間を通じて効率的に熱を放出し、機械冷却の要件と施設の水消費量を大幅に削減できます。

サーバー内のどのコンポーネントも冷たい空気に依存していないため、データセンターの周囲温度は柔軟です。暖かい夏の空気でも問題ありません。液体がすべての作業を行います。そして、同じ液体を閉ループで再循環できるため、チップを冷却するための新しい水は消費されません。

[動画: https://blogs.nvidia.com/wp-content/uploads/2026/06/LiquidCoolingInfra_montage_v4.mp4]

業界の新しい標準

NVIDIAのルビンプラットフォームは100%液体冷却インフラストラクチャを統合しているため、それに向けて構築するすべてのクラウドプロバイダーとデータセンターオペレーターが移行を進めています。

エコシステムも追随しています。Schneider Electricの先進冷却部門であるMotivairは、NVIDIAの製品ロードマップと約10年間協力してきましたが、その社長兼CEOであるRichard Whitmore氏は、電力密度が空冷ではもはや実行可能な選択肢ではなくなる閾値を超えたため、その関係はさらに深まったと述べています。

「チップあたりのワット数が一定レベルを超えると、液体冷却が必須になりました」とWhitmore氏は述べています。

AIインフラを冷却するには熱すぎる?それはあなたが思うより熱い

業界には、冷たいデータセンターが効率的であるという長年の誤解があります。数十年前、データセンターがウォークイン冷凍庫のように感じられなければ、人々は何か問題があると思っていました。

実際には、チップは、その直感よりもはるかに暖かい環境に耐えることができます。シリコンプロセッサは膨大な内部熱を発生させます。完全に液体冷却されたチップに45℃で入る冷却液は、チップ表面全体で熱負荷を吸収した後、約55℃で排出されます。それでもパフォーマンスは低下しません。

冷却プレートがデバイス温度を検証済みの動作範囲内に維持するため、ラックに45℃の冷却液が入っていても、プロセッサはフルパフォーマンスで動作し続けます。

ファンなし、コールドアイルなし – 根本的に異なるマシン

従来のデータセンターに入ると、2つのことに気づくでしょう。騒音 – 冷却ファンは、85デシベル以上の総騒音レベルに寄与しており、耳の保護が必要なほどの大きさです – そして、ホットアイルとコールドアイルの物理的な配置、コンポーネントに冷却空気を送り込むために慎重に管理されています。

ルビンアーキテクチャはこの状況を変えます。

冷却液(水75%、プロピレングリコール25%)は、プロセッサに直接取り付けられたコールドプレートを流れ、熱源から熱を奪います。その冷却液を最大45℃で流すということは、多くの気候では、施設ループが機械式チラーや騒音の多いファンをオンにすることなく熱を放出できることを意味します。

[画像]

AIファクトリーでは、冷却液が冷却液分配ユニットから閉ループサイクルでサーバーに流れます。

これはエネルギー節約を超えた可能性を解き放ちます。それは、水消費を完全に排除する可能性です。

適切な地理的条件(安定して涼しい外気温がある場所)では、液体冷却データセンターは、熱を直接熱源で捕捉し、建物の外に設置された大型ラジエーターコイルである屋外ドライクーラーに輸送する冷却液分配ユニットを通じて熱を放出できます。

ループは一度だけ充填され、施設の使用寿命中は閉じたまま稼働します。そして、従来の空冷インフラストラクチャと比較して、AIファクトリーでのスペースを劇的に少なくします。

「適切な地理的場所で、適切なシステム設計を行えば、冷凍設備は一切必要ありません」とWhitmore氏は述べています。「屋外に大きなラジエーターコイルを設置し、すべての冷却に外気温を利用できます。これは信じられないほど効率的です。」

地理的条件の注意点は重要です。スコットランド高地のデータセンターとアリゾナ州フェニックスのデータセンターでは、非常に異なる現実があります。しかし、温暖な気候でさえ、45℃の冷却液への移行は、オペレーターをチラー不要の理想に大きく近づけます。外気温が要求する場合にのみ、チラーが数日稼働する程度です。

AIファクトリー向けのこの新しいモデルのもう1つの重要な利点は、廃熱回収の可能性であり、AIファクトリーの運用からの残留熱を近くの商業ビルや住宅ビルの暖房に再利用できます。

誰も解決していなかった工学的課題

以前の液体冷却サーバーはハイブリッドでした。GPUとCPUはコールドプレートを備えていましたが、システムの残りの部分は空冷のままで、フィン付きヒートシンクは動く空気中に熱を放散するように設計されていました。完全に液体冷却されたサーバーでは、これらのコンポーネントの冷却は、液体を使用するように完全に再設計する必要がありました。

NVIDIAの熱エンジニアリングチームは、これらのコンポーネントが熱を処理する方法を改良し、単一のインレットとアウトレットを使用してボード上の複数の高電力チップに液体をルーティングするのを簡素化する冷却ループを設計しました。これにより、トレイレベルの冷却アーキテクチャがクリーンになりました。

目に見える成果の1つは、ルビンサーバーには、空冷サーバーが穴の開いたベゼルを備えているのに対し、クリーンで密閉されたフロントパネルがあることです。もう1つは、完全に液体冷却されたサーバーは空冷サーバーよりも高いラック密度を可能にするため、以前は6ラックユニットを占有していたシステムが2ユニットに収まるということです。より少ないスペースで、より少ない騒音で、より多くのコンピューティングを実現します。

[画像]

液体冷却インフラストラクチャのオーバーヘッドパイプが強力なAIサーバーに接続されています。

AIワークロードは軽くなっていません。データセンター建設を牽引するコンピューティング需要は、ほぼ他のすべてのインフラ投資カテゴリよりも速く成長しています。

そのコンピューティングを冷却する方法に効率改善がなければ、AIを大規模に実行するためのエネルギーコストは、ハードウェアの増加と歩調を合わせて増加するでしょう。45℃までの液体冷却(ホットタブより熱く、地球にはより涼しい)は、このギャップを埋めるために業界が持つ最も重要なツールの1つです。

液体冷却、AIファクトリー向けNVIDIA DSXプラットフォーム、エネルギー効率の高いAIインフラストラクチャに対するNVIDIAのアプローチについて、さらに詳しく学んでください。