Synopsys
Ansys

データセンターとは何ですか?

ラリー・ウィリアムズ

2026年8月10日 / 読了時間:24分

重要ポイント

  • 定義:データセンターとは 、重要なITインフラ(演算、ストレージ、ネットワーク)および、それらの機器を継続的に稼働させるために必要な冗長化された電源・冷却システムを収容するために設計された、高度に設計された耐障害性のある施設である。
  • AIへの移行: CPU中心のエンタープライズワークロードからGPU中心のAIトレーニングへの移行により、 ラックの電力密度は最大10倍に増加し、データセンターの設計、電力供給、冷却の方法が一新されました。
  • 熱管理:AI高密度 施設(ラックあたり30~40 kW以上)では、ダイレクト・トゥ・チップ冷却や液浸冷却の必要性が高まっている一方、従来のエンタープライズレベルの密度や、次のような空冷式エミュレーションシステムを含む専用の検証プラットフォームでは シノプシス ZeBu — のような空冷式エミュレーションシステムを含む——は、依然として空冷の限界範囲内で十分に稼働し続けている。
  • チップから施設までのシミュレーション・スタック: 高密度施設の設計には 、シリコンパワー・インテグリティ 、室レベルの気流、施設レベルの構造的健全性にわたる工学的な解析が必要であり、これには シノプシス シリコンレベルのツールを Ansys 施設レベルのマルチフィジックス ソルバーを統合し、着工に備える必要があります。
  • 市場規模: AI需要に牽引され 、2030年までに世界のデータセンターの容量は220ギガワット(GW)に達すると予想されており、これには世界全体で推定6.7兆ドルの投資が必要になると見込まれている(マッキンゼー)。

現代のデータセンターは、もはや単にサーバーを収容する建物ではありません。それは、コンピューティング、ストレージ、ネットワーク、電力供給、および熱管理インフラが相互に密接に連携した、極めて複雑なシステムです。デジタル経済の物理的な基盤として、データセンターは、エンタープライズアプリケーションからグローバルなクラウドサービス、さらには高度な人工知能(AI)ワークロードに至るまで、あらゆるものを支えるデータを処理、保存、配信しています。

このインフラの規模は急速に拡大しています。マッキンゼーによると、2030年までに世界のデータセンター需要は220ギガワット(GW)に達すると予想されており、これには世界全体で推定6.7兆ドルの投資が必要になると見込まれています。この成長により、こうした施設の設計、建設、運用方法に変化が生じています。

エンジニアリングチーム、アーキテクト、ITリーダーにとって、データセンターのアーキテクチャを理解するには、IT機器だけにとどまらず、その先を見据える必要があります。現代のデータセンターが直面する課題は、マルチフィジックス な問題です。すなわち、極めて高い電力密度と熱的限界とのバランスを取り、耐障害性を備えた冗長性を確保し、トランジスタレベルから施設レベルに至るまでエネルギー効率を最適化することです。

本ガイドでは、最新のデータセンターアーキテクチャ、中核となるインフラストラクチャ構成要素、施設の種類、およびAIの需要がデータセンターの設計にどのような変化をもたらしているかについて、技術的な概要を解説します。

定義

データセンターとは、本質的に、重要なコンピュータシステムおよび関連コンポーネントを収容するために設計された、専用の物理的施設、あるいは建物内の専用スペースのことです。その主な機能は、IT運用に対して、安全で信頼性が高く、厳重に管理された環境を提供することです。

工学的な観点から見ると、データセンターは「連続処理エンジン」として捉えるのが適切です。データセンターは電力と生データを取り込み、高密度に配置されたシリコンアレイを通じてそのデータを処理し、処理済みの情報と熱を出力します。

技術的な定義:データセンターとは、 冗長化された電力供給、精密な熱管理、および安全なネットワーク接続を通じて、高密度のIT機器の継続的な稼働を維持するよう設計された耐障害性施設であり、厳格な環境条件の下で運用されるものである。

データセンターの複雑さは、そのシステム間の相互依存関係にあります。ある領域で障害や非効率が生じると、それが他の領域へと波及します。例えば、演算密度が高まると、それに比例して電力供給量を増やす必要が生じ、その結果、発熱量が増加します。これに伴い、より強力な冷却が必要となり、さらに電力消費量が増加するという悪循環に陥ります。この悪循環を断ち切るには、施設のライフサイクル全体にわたる高度なシミュレーションと最適化が不可欠です。

進化:メインフレームからAIファクトリーへ

データセンターのアーキテクチャは、演算能力の継続的な小型化とデータの指数関数的な増加に牽引され、いくつかの明確な時代を経て進化してきました。現在の時代――しばしば「AIファクトリー」と呼ばれる――とは、従来の施設設計では対応できなかった密度と規模で、GPUを中心としたワークロードに特化して設計された施設を指します。ここでは、この用語をその説明的な意味において、業界の略語として用いています。

時代

アーキテクチャ

特徴的な要素

電力密度

1940年代~1970年代

メインフレーム時代

専用の部屋、特注の電源、そして簡易的な空調設備を必要とする、巨大な単一用途のコンピュータ(ENIACなど)。

< 1 kW per rack equivalent

1980年代~1990年代

クライアント/サーバー時代

マイクロコンピュータと分散型ネットワークの台頭。企業のオフィスビルには、サーバールームが一般的になった。

ラックあたり1~3 kW

2000s

インターネットと仮想化

ドットコム・ブームを契機に、コロケーション専用施設が次々と建設されました。仮想化技術により、1台の物理サーバー上で複数のオペレーティングシステムを実行できるようになり、利用率が向上しました。

ラックあたり3~5 kW

2010s

クラウド&Hyperscale

企業所有の施設から、大規模で一元化されたクラウドプロバイダー(AWS、Google、Azure)への移行。2006年にオレゴン州ザ・ダレスに開設されたGoogleの施設(130万平方フィート)は、hyperscale アーキテクチャのモデルとなった。

ラックあたり5~10 kW

2020年代~現在

AIファクトリー

CPU中心のワークロードからGPU/NPU中心のワークロードへの移行。施設は並列処理に特化して設計されており、液体冷却や大規模な電力インフラが必要となる。

ラックあたり40~100+ kW

データセンターのアーキテクチャに関するインフォグラフィック

図1. データセンターアーキテクチャの変遷。 データセンターのアーキテクチャは、コンピューティング技術の進歩と需要の変化に牽引され、5つの明確な時代を経て進化してきました。ラックの電力密度は、メインフレーム時代の1 kW未満から、今日のAIファクトリーにおける40~100+ kWへと、およそ100倍に増加しました。AI時代は、同一の設計サイクルにおいて、電力、冷却、構造設計の3つを統合的に再考することが求められる、初めての時代です。

大規模言語モデル(LLM)のトレーニングや複雑なシミュレーションの実行に伴う要求により、高密度ワークロードにおいて、従来型の空冷式データセンターの設計は物理的な限界に達しており、こうした施設の電力・熱管理インフラの再構築が迫られている。

中核となるインフラストラクチャの構成要素

現代のデータセンターは、5つの基盤の上に構築されています。IT機器(コンピューティング、ストレージ、ネットワーク)が実際のデータ処理を行う一方で、施設インフラ(電力、冷却)は、その処理が継続的かつ安全に行われることを保証します。

1. コンピューティング・インフラストラクチャ

コンピューティング層はデータセンターの「頭脳」であり、アプリケーションを実行し、データを処理する物理サーバーで構成されています。これらのサーバーのアーキテクチャによって、施設全体の物理的なレイアウトが決まります。

  • ラックサーバー: 業界標準の幅19インチまたは23インチのラックに搭載されるように設計された、標準化された スタンドアロン型サーバー。サイズはラックユニット(U)で表され、1Uは高さ1.75インチに相当します。 一般的なラックサーバーのサイズは1Uから4Uの範囲です。各ラックサーバーには独自の電源、冷却ファン、ネットワークインターフェースが搭載されているため、柔軟性が高い反面、高密度型の代替製品に比べて、1計算サイクルあたりの物理的なスペースと消費電力が多くなります。
  • ブレードサーバー: 1平方フィートあたりの演算密度を最大化するため 、エンジニアたちはブレードサーバーを開発しました。これは、中核となる処理コンポーネント(CPU、メモリ、ローカルストレージ)のみを搭載した、最小限の構成に絞り込まれたサーバーボードです。複数のブレードが、電源、冷却、ネットワーク接続を一元的に提供する単一の共有シャーシ内に収められています。この共有インフラストラクチャにより、エネルギー効率が向上し、配線の複雑さが軽減されるため、ブレードエンクロージャーは高密度なエンタープライズ環境における標準となっています。
  • メインフレーム: しばしばレガシー技術と見なされることもありますが 、最新のメインフレームは、高いトランザクション処理速度、セキュリティ、および耐障害性を必要とする金融機関、航空会社、政府機関にとって、依然として不可欠な存在です。最新のメインフレーム1台で、1日あたり数十億件の暗号化されたトランザクションを処理することができ、内部に冗長性を備えているため、システムのダウンタイムを発生させることなくハードウェアの交換を行うことが可能です。
  • プロセッサ(CPU 対 GPU/NPU): コンピューティング層における最も重要なアーキテクチャ上の変化は 、プロセッサの種類の移行です。従来のエンタープライズワークロード(Web サーバー、データベース、仮想マシン)は、逐次処理と迅速なコンテキスト切り替えに最適化された中央処理装置(CPU)に依存しています。 一方、最新のAIトレーニング、推論、およびハイパフォーマンスコンピューティング(HPC)のワークロードには、大規模な並列処理能力が求められます。これが、グラフィックスプロセッシングユニット(GPU)や専用のニューラルプロセッシングユニット(NPU)の普及を後押ししました。これらのチップは、従来のCPUに比べて物理的に大きく、消費電流が多く、動作温度も高くなります。CPU中心からGPU中心のコンピューティングへのこの移行が、業界全体におけるラック電力密度の指数関数的な増加の主な要因となっています。

2. ストレージインフラストラクチャ

データセンターでは、処理されるエクサバイト規模のデータを格納するために、大規模で可用性が高く、耐障害性に優れたストレージシステムが必要です。ストレージアーキテクチャは、データへのアクセス方法と、データを取得できる速度によって定義されます。

  • ダイレクトアタッチドストレージ(DAS): ストレージドライブ(HDDまたはSSD)が特定のサーバー内に物理的に搭載されるか、またはそのサーバーに直接接続される、最も シンプルなアーキテクチャです 。DASは低レイテンシと低コストという利点がありますが、データの孤立した「島」が生じ、広範なネットワーク全体でデータを容易に共有したり、スケールアウトしたりすることができません。
  • ネットワーク接続型ストレージ(NAS):NASシステムは 、ローカルエリアネットワーク(LAN)に直接接続されたファイルレベルのストレージを提供します。これらは専用のファイルサーバーとして機能し、ネットワークファイルシステム(NFS)やサーバーメッセージブロック(SMB)などの標準プロトコルを使用して、複数のクライアントサーバーが共有ファイルに同時にアクセスできるようにします。NASは、非構造化データ、ファイル共有、およびアーカイブに最適です。
  • ストレージ・エリア・ネットワーク(SAN): 高いパフォーマンスと低遅延が求められるミッションクリティカルなアプリケーションの場合 、エンジニアはSANを導入します。SANとは、ブロックレベルのストレージアクセスを提供する、LANとは独立した専用の高速ネットワークです。 クライアントサーバーにとって、SANボリュームは、あたかもローカルに接続された物理ドライブであるかのように認識されます。SANは、ファイバーチャネルやiSCSI(インターネット・スモール・コンピュータ・システム・インターフェース)などの高速プロトコルを利用しており、大規模データベース、仮想化環境、およびERP(エンタープライズ・リソース・プランニング)システムにとって不可欠なものです。
  • オブジェクト・ストレージ: クラウドコンピューティングやビッグデータ解析 の普及に伴い 、オブジェクト・ストレージ は、大規模なスケーラビリティを実現する主要なアーキテクチャとして台頭してきました。オブジェクト・ストレージ は、データを階層型ファイルシステム(NASなど)や生データブロック(SANなど)として整理するのではなく、個別のオブジェクトとして管理します。各オブジェクトには、データ本体、可変メタデータ、およびグローバルに一意な識別子が含まれています。このフラットなアーキテクチャにより、hyperscale プロバイダーは、分散クラスター全体で数十億ものファイル(画像、動画、バックアップなど)を保存・取得することができ、ほぼ無限のスケーラビリティを実現しています。
  • NVMe(不揮発性メモリ Express): 物理的なストレージメディアも 進化を遂げています。安価で大容量のアーカイブ用途では依然として回転式ハードディスクドライブ(HDD)が使用されていますが、アクティブストレージ層では現在、ソリッドステートドライブ(SSD)が主流となっています。NVMeはSSD向けの最新プロトコル規格であり、高速なPeripheral Component Interconnect Express(PCIe)バスを活用するために特別に設計されています。 回転式ディスク向けに設計された従来のSATA/SASインターフェースをバイパスすることで、NVMeはより高いスループットとより低いレイテンシを実現しており、これはデータを大量に消費するAIワークロードにデータを供給する上で極めて重要です。

3. ネットワークインフラ

ネットワークは、施設の中枢神経系のようなものです。ネットワークは、サーバー同士を相互に接続する(イースト・ウェスト・トラフィック)役割と、データセンターを外部と接続する(ノース・サウス・トラフィック)役割を担っています。分散コンピューティングやマイクロサービスアーキテクチャが標準となるにつれ、イースト・ウェスト・トラフィックの量は爆発的に増加し、ネットワークトポロジの再設計が余儀なくされています。

  • リーフ・スパイン・トポロジー:現代の データセンターでは、従来の3層ネットワークアーキテクチャ(コア、アグリゲーション、アクセス)から、リーフ・スパイン(CLOS)トポロジーへと大きく移行しています。このフラットなアーキテクチャでは、すべてのリーフスイッチ(サーバーに直接接続される)が、すべてのスパインスイッチ(ネットワークのバックボーンを形成する)に接続されています。 これにより、どのサーバーも他のどのサーバーからも同じネットワークホップ数で接続されることが保証され、レイテンシが最小限に抑えられ、階層型設計でよく見られるボトルネックが解消されます。リーフ・スパインは依然として業界標準ですが、AIデータセンターでは、大規模なAIワークロードのスケール、同期性、トラフィックパターンにより適切に対応するため、メッシュ、トーラス、ファットツリー、ドラゴンフライ、レール最適化ファブリック、光ダイレクト接続ネットワークなどの代替トポロジーの検討が進められています。
  • トップ・オブ・ラック(ToR)スイッチ: 各サーバーラックの上部(場合によっては中央や下部)に設置される高性能 スイッチです。特定のラック内のすべてのサーバーからのネットワーク接続を集約し、高速アップリンクを介してリーフスイッチに接続します。このアーキテクチャでは、サーバーごとに個別のケーブルを敷設するのではなく、ラックからコアネットワークへ数本の大容量ケーブルを敷設するだけで済むため、必要な配線量を削減できます。
  • 光インターコネクトとCPO: データ転送速度が400G、800Gを超え、1.6Tへと向かうにつれ 、従来の銅線ケーブルでは、距離の増加に伴い深刻な信号劣化や過度な消費電力の問題が生じています。この問題を解決するため、エンジニアたちは光ファイバーに期待を寄せています。 この移行の最先端にあるのが、コパッケージド・オプティクス (CPO)です。CPOでは、光トランシーバーがプリント基板の端から移動され、ネットワーク用ASIC(特定用途向け集積回路)のすぐ隣に直接パッケージ化されます。これにより、電気的トレースの長さが短縮され、消費電力が削減されるとともに、高帯域幅のAIワークロードにおけるシグナル・インテグリティ が向上します。
データセンターのネットワークトポロジー

図2. データセンターのネットワークトポロジー。 従来の3層ネットワーク(コア→アグリゲーション→アクセス)では、ホップ数が変動し、アグリゲーション層でボトルネックが発生するため、イースト-ウエストトラフィックが制約されます。リーフ・スパインアーキテクチャは、この2つの課題を解決します。すべてのリーフスイッチがすべてのスパインスイッチに接続されているため、どのサーバーから他のサーバーへも正確に2ホップで到達でき、GPU間AIトレーニングトラフィックに求められる、予測可能で均一なレイテンシを実現します。

4. 電力インフラ

電力配電は、現代のデータセンターにおいて最も重要かつ複雑な技術的課題の一つです。ダウンタイムを防ぐためには、電力インフラは極めて高い信頼性を備え、適切な処理が施され、完全な冗長性を確保していなければなりません。また、hyperscale の施設の需要に対応できるよう、拡張性を持たせる必要があります。

  • 電力変電所および開閉装置: 大規模な施設の場合 、電力は高電圧の送電網から直接、敷地内の専用変電所へと供給されます。 変圧器がこの高電圧(多くの場合115 kV以上)を中電圧(通常13.8 kVまたは34.5 kV)に降圧し、キャンパス全体に配電します。その後、開閉装置がこの電力を各建物やシステムに分配するとともに、回路保護および絶縁の第一段階を担います。
  • 無停電電源装置(UPS):UPSは 、電力異常に対する第一の防衛線です。 UPSには2つの重要な機能があります。1つは、外部から供給される商用電源を調整すること(電圧の低下、サージ、周波数の変動を平滑化し、敏感なIT機器にクリーンな電力を供給すること)、もう1つは、商用電源が完全に停止した場合に、即座に短時間のバッテリーバックアップを提供することです。このバッテリー駆動時間(通常5~15分)は、バックアップ発電機が起動し、負荷と同期するまでの間、サーバーを稼働させ続けるのにちょうど十分な長さです。
  • 非常用発電機: 長期にわたる停電に備え 、データセンターではディーゼルまたは天然ガス発電機が活用されています。これらの産業用エンジンは、施設全体の負荷(IT機器および冷却インフラ)を数日間継続して賄えるよう設計されており、その稼働時間は敷地内の燃料貯蔵容量によってのみ制限されます。
  • 配電ユニット(PDU): UPSによって電力が調整されると 、その電力はデータセンターのフロアに設置されたPDUへと送られます。これらのユニットは電圧を再度降圧し(北米では通常208 Vまたは415 V)、個々のサーバーラックに分配します。 最新のインテリジェント型(スマート型)PDUは、コンセント単位での電力消費量をリアルタイムで監視できるため、運用担当者は効率性を追跡し、未使用の容量を特定し、ブレーカーをトリップさせることなく安全にラック密度を高めることができます。

5. 冷却および熱管理

冷却インフラは、コンピューティングシステムや電源システムから発生する熱を除去します。ラック密度が高まるにつれ、冷却インフラは、高密度ワークロードにおけるデータセンターの収容能力に対する主要な制約要因となっています。

  • サーバールーム用空調(CRAC)/空気処理(CRAH): サーバールーム内に冷気を循環させる従来のシステム で、多くの場合、高床式設計を採用し、穴あきタイルを通して冷気を上方に送り出し、コールドアイルに導く。
  • ホット/コールド・アイル・コンテインメント: サーバーに流入する冷気と、サーバーから排出される高温の排気を物理的に 分離し、両者の混ざり合いを防ぎ、冷却効率を向上させる仕切り。
  • 液体冷却: AI高密度施設に特徴的な「ラックあたり30~40 kW」という閾値を超えると 、空冷はますます実用的でなくなっていきます。液体冷却システム(ダイレクト・トゥ・チップ方式または浸漬方式)では、空気よりもはるかに高い比熱を持つ流体を使用して、コンポーネントから直接熱を除去します。この閾値以下、つまり従来のエンタープライズ向けコンピューティングや専用の検証プラットフォームに典型的な密度の範囲内では、空冷は依然としてその限界内で十分に機能します。

データセンターの種類

データセンターは「モノリシック 」という単一の概念ではありません。所有形態、規模、主な用途に基づいて分類されます。これらの違いを理解することは、アーキテクチャの計画において極めて重要です。

データセンターの種類

所有・運営

規模と設置面積

主なユースケース

エンタープライズ

単一の組織が所有・運営している。

中小規模(1~10 MW)

企業の独自アプリケーション、機密データ、および社内ITインフラを収容しています。

コロケーション(Colo)

第三者プロバイダーが所有しており、スペース、電力、および空調設備は複数のテナントに貸し出されています。

中規模~大規模(10~50+ MW)

ITハードウェアを自社で所有したいが、施設インフラの構築や維持にかかる設備投資を避けたい組織。

マネージド・サービス

第三者が所有しており、プロバイダーが施設とIT機器の両方を管理している。

中規模(5~20 MW)

パブリッククラウドモデルへの移行を行わずに、IT運用を完全に外部委託しようとしている組織。

クラウド /Hyperscale

大手クラウドサービスプロバイダー(AWS、Google、Microsoft、Meta)が所有・運営しています。

大規模(50~200+ MW)

世界中の数百万人の顧客に対し、拡張性のあるオンデマンド型のインフラストラクチャ・アズ・ア・サービス(IaaS)およびプラットフォーム・アズ・ア・サービス(PaaS)を提供しています。

ハイブリッドクラウド

統合モデル:機密性の高いワークロードや定常的なワークロード向けに企業が独自に保有するインフラに加え、弾力性のあるワークロード、バースト型のワークロード、あるいは新規のワークロード向けにhyperscale のパブリッククラウド容量を活用するモデル。ワークロードの配置はポリシーに基づいて行われ、ソフトウェアによって定義される。

小規模から大規模(変動あり — オンプレミスの設置面積および契約済みのクラウド容量によって異なる)

データ居住要件や規制要件(金融サービス、医療、政府機関など)がある組織であり、かつ、突発的なワークロードや新規のAIプロジェクトに対応するための弾力的な処理能力を依然として必要としている組織。

エッジ

さまざまな組織(通信事業者、クラウドプロバイダー、企業)が所有している。

Micro to Small (< 1 MW)

エンドユーザーやデータソースの近くに配置し、リアルタイムアプリケーション(IoT、自動運転車、5G)の遅延を最小限に抑える。

AI/HPC

ハイパースケーラー、AI特化型クラウドプロバイダー、または研究機関が所有している。

大規模~超大規模(50~500+ MW)

大規模言語モデルのトレーニングや複雑なシミュレーションの実行に特化して設計されています。極めて高い電力密度と液体冷却が特徴です。

AIデータセンターの台頭

エンタープライズ施設やコロケーション施設は依然として従来のITの基盤を成していますが、最も大きなアーキテクチャ上の変化はAIおよびHPCの分野で起こっています。これらの施設は、GPUクラスタの特定の要件に基づいて設計されており、ネットワークファブリック(InfiniBandなど)や熱管理システムが建物の物理的なレイアウトを決定づけています。

こうした高密度施設の具体的なアーキテクチャ要件についてさらに詳しく知りたい場合は、「AIおよびHPCデータセンターの概要」をご覧ください。

AI革命:データセンターアーキテクチャの再定義

人工知能(AI)の企業ワークフローへの統合は、過去10年間におけるデータセンターのアーキテクチャ変革の最大の推進要因である。マッキンゼーによると、2030年までにAIワークロードがデータセンターの総需要の70%を占める見込みである。

この変化は、単にサーバーの台数を増やすだけの問題ではなく、データセンターの根本的な仕組みそのものを変えるものです。

電力密度の課題

AIがデータセンターのアーキテクチャに及ぼす最も直接的かつ顕著な影響は、電力密度の指数関数的な増加です。仮想化やクラウドの黎明期に建設された従来のエンタープライズデータセンターは、ラックあたりの電力密度が5~10キロワット(kW)となるよう設計されていました。この密度であれば、標準的な高床式空冷システムや従来の配電ユニットで十分に対応可能です。

今日、大規模言語モデル(LLM)のトレーニング用に構成された高性能GPUを1ラック設置するだけで、40~100kW以上の電力を消費する可能性があり、次世代の半導体チップの登場により、その数値はさらに上昇する見込みです。これは、同じ設置面積内で電力密度が10倍に増加したことを意味します。 10年前に設計された施設に、最新のAIハードウェアを単純に後付けすることはできません。電力配線ではブレーカーが落ち、冷却インフラでは熱を十分に除去できず、サーマルスロットリング(発熱を抑えるためにクロック速度を下げる現象)やハードウェアの損傷を招くことになるでしょう。

この密度によって生じるマクロレベルのエネルギー需要は膨大です。ローレンス・バークレー国立研究所によると、2018年に米国のデータセンターが消費した電力は76テラワット時(TWh)で、これは米国の総エネルギー消費量の1.9%に相当します。 2028年までに、主にAIブームに牽引され、その数値は325~580 TWhに達すると予測されており、これは米国の総エネルギー消費量の最大12%を占めることになる。

消費電力チャート

図3. 米国のデータセンターの電力消費量の推移。 米国のデータセンターの電力消費量は、2018年の76 TWh(国内エネルギー消費量の1.9%)から、2023年には推定176 TWhへと急増しており、2028年までに325~580 TWhに達すると予測されている。これは米国の総エネルギー消費量の約12%に相当する。この急増は、主にAIワークロードの増加によって牽引されている。 出典:LBNL、『2024年米国データセンターエネルギー使用量報告書』。

並列処理と高速ファブリックへの移行

AIの学習と推論には、膨大な並列処理能力が必要ですが、従来のCPUではこれを効率的に提供することができません。このため、GPUや専用のニューラルプロセッシングユニット(NPU)が普及しています。これらのチップは物理的に巨大であり、半導体製造におけるレチクルサイズの限界に迫ることが多く、また従来のCPUに比べて消費電流が大きく、動作温度も高くなります。

AIワークロードは高度に分散しています。単一の基盤モデルをトレーニングするには、数千台のGPUが連携して動作し、データを待つ間に演算エンジンがアイドル状態にならないよう、極めて高速かつ超低遅延で通信を行う必要があります。これには、InfiniBandや高度なイーサネット構成などの、高帯域幅に特化したネットワークファブリックと、コパッケージド・オプティクス の導入が求められます。こうした高速相互接続は、ラックの消費電力と熱負荷をさらに増加させ、密度に関する課題をさらに深刻化させます。

データセンターの冷却および熱管理

AIデータセンターで使用される電力の最大40%は、演算用ハードウェアではなく、チップを冷却するために構築されたシステムによって消費されています。この熱負荷の管理は、現代の高密度データセンターの容量において、最も重要な技術的制約となっています。

AIの集積度における空冷の限界

何十年もの間、熱管理の業界標準は空冷方式でした。データセンターでは、コンピュータ室用空調装置(CRAC)またはコンピュータ室用エアハンドラー(CRAH)を用いて空気を冷却し、その冷気を高床式床の下に送り込み、穴あきタイルを通してサーバーラック間のコールドアイルへと送り出しています。 サーバーはこの冷気を吸い込み、内部のヒートシンクに流した後、熱気をホットアイルに排出し、そこからCRACユニットに戻って再び冷却されます。従来のエンタープライズレベルの密度や、空冷式の シノプシス ZeBu エミュレーションサーバーのような特殊な検証プラットフォームにおいて、このアプローチは依然として極めて効果的です。

しかし、AIワークロードに特徴的な「ラックあたり20~30 kW」という閾値を超えると、空気は熱伝導率が比較的低いため、熱を除去するために必要な空気量と風速は、物理的に実現不可能なレベルとなってしまいます。 これほどの量の空気(サーバー内部およびCRACユニット内部の両方)を循環させるために必要なファンは、施設の総電力予算のかなりの部分を消費し始め、エネルギー効率を低下させてしまいます。また、高密度のサーバーシャーシに高速の空気を送り込むことは、作業員にとって有害なレベルの騒音も発生させます。

AI集積型施設における水冷への移行

AIワークロードの40~100+ kWという高密度化に対応するため、業界では液体冷却技術の導入が急速に進んでいます。処理水や特殊な絶縁液などの液体は、空気よりも数千倍も大きな熱容量を持つため、空気ファンよりもはるかに効率的に熱を吸収・除去でき、ポンプ駆動に必要なエネルギーも少なくて済みます。

  • ダイレクト・トゥ・チップ(コールドプレート)冷却:液体は 、マザーボード上の最も高温になるコンポーネント(主にCPU、GPU、および高帯域幅メモリ)に物理的に直接取り付けられたマイクロチャネルコールドプレート内を循環します。 液体は伝導によって熱を吸収し、マニホールドを経由して冷却液分配ユニット(CDU)へ、そして最終的に施設内の熱交換器へと熱を運び出します。この方法は非常に効果的で、サーバーで発生する熱の70~80%を捕捉することができます。残りの20~30%(電源ユニット、ストレージドライブ、およびその他の minor components によって発生する熱)は、依然として従来型の空冷によって管理されるため、これはハイブリッド方式となります。
  • 浸漬冷却: 最高密度を実現するため、エンジニアは浸漬冷却を採用しています。サーバー全体(あるいはラック全体)を、非導電性の特殊な誘電性流体が満たされた槽に物理的に浸漬します。この流体がすべての部品に接触するため、実質的にすべての熱を吸収し、サーバーのファンや施設の空調設備が不要になります。
    • 単相浸漬:流体は 液体のままの状態を保ち、熱を吸収しながら熱交換器へと送られ、冷却された後に浴槽に戻されます。
    • 二相浸漬:流体は 低沸点になるように設計されています。高温のシリコンと接触すると、流体は沸騰して蒸気となり、その過程で潜熱を吸収します。蒸気はタンク上部の凝縮器コイルまで上昇し、そこで冷却されて液体に戻り、浴槽へと降り注ぐという連続的なサイクルを繰り返します。
データセンターの冷却アーキテクチャの比較

図4. データセンターの冷却アーキテクチャの比較。 密度の幅にわたる3つの冷却アーキテクチャ。空冷(ラックあたり最大約20 kW、PUE 1.3~1.6)は、ホット/コールドアイル封じ込め方式とCRACユニットを採用しており、従来のエンタープライズ環境や特殊な検証環境の密度において、依然として高い効果を発揮する。 ダイレクト・トゥ・チップ液冷(ラックあたり40~100+ kW、PUE 1.1~1.25)は、コールドプレートを介して熱の70~80%を回収し、残りは空冷で処理します。浸漬冷却(ラックあたり100+ kW、PUE 1.1未満)は、サーバーを誘電性流体に浸漬して熱をほぼ完全に回収し、最高密度環境における熱的限界に対処します。

電力、エネルギー効率、および持続可能性

現代のデータセンターにおける膨大なエネルギー消費により、経済的な必要性と規制上の圧力に後押しされ、持続可能性はエンジニアリング上の最重要課題となっている。

主要な効率指標

この業界では、施設の効率性を評価するために、主に2つの指標が用いられています:

  • 電力使用効率(PUE): 施設全体の電力消費量のうち、IT機器が消費する電力の割合を指します 。PUEが1.0の場合、電力の100%が演算処理に充てられていることを意味します(理論上の下限値)。従来のデータセンターでは、PUEが1.5から2.0の範囲で運用されることが一般的です。一方、高度な冷却技術やシミュレーションを活用する最新のhyperscale 施設では、PUEを1.1近くまで低減することが可能です。
  • 水利用効率(WUE): 冷却に使用される水の量と、IT機器が消費する電力の比率 。液体冷却が普及するにつれ、特に水資源が乏しい地域においては、水の消費量を最小限に抑えること、あるいは閉ループシステムを活用することが、ますます重要になってきている。

再生可能エネルギーの系統連系

カーボンフットプリントを低減するため、大手データセンター運営会社は、再生可能エネルギー(風力、太陽光、地熱)の最大の企業購入者のひとつとなっています。再生可能エネルギーは供給が不安定であるため、データセンターが24時間365日継続的に電力を必要とする特性と相反します。このため、高度なエネルギー貯蔵ソリューション(大規模なリチウムイオン電池バンクなど)や、負荷のバランスを調整し、需要のピーク時には電力網へ電力を戻すことさえ可能な、スマートな系統連系型UPSシステムが必要となります。

The Chip-to-Facility Simulation Stack

本ガイドにおける「Chip-to-facility」とは、シリコンレベルのシミュレーションと、ファシリティレベルのマルチフィジックス シミュレーションを結びつける統合エンジニアリング解析スタックを指します: シノプシス チップおよびパッケージ層におけるシリコンレベルのツールと、 Ansys マルチフィジックス ラック、ルーム、施設レベルにおけるソルバー。これは業界で確立された独立した用語ではなく、ここでは、これらを組み合わせた仕組みを説明するために用いる枠組みです。 シノプシス + Ansys ソリューションが、現代のデータセンター設計に関わる4つのエンジニアリングスケールにどのように対応するかを説明するために、本ガイドで用いている枠組みです。

現代的な高密度データセンターの設計は、試行錯誤によるエンジニアリングを行うにはあまりにも複雑かつコストがかかりすぎる。電力、熱、構造の各システムが相互に依存しているため、トランジスタのナノメートルスケールからサーバーパッケージのセンチメートルスケール、さらには施設そのもののマクロスケールに至るまで、包括的なシミュレーションアプローチが必要となる。

1. チップレベルの電力・熱解析

データセンターの熱プロファイルは、シリコン内部から始まります。チップが複雑な3DICパッケージ内に専用の処理素子(NPUなど)を統合するにつれて、大きな電力変動が生じます。 シノプシス 当社の設計およびサインオフ・ポートフォリオは、このレイヤーをエンドツーエンドで対応します:

  • シノプシス Fusion Compiler — RTLからGDSへの合成および物理実装。この段階で、消費電力およびタイミングの予算が設定される。
  • シノプシス 3DIC Compiler — マルチダイ /高度なパッケージ協調設計 および最適化のための、マルチフィジックス 解析機能を備えた、探索からサインオフまでを統合したプラットフォーム。
  • シノプシス StarRC —寄生抽出 実装結果に対する正確なタイミングおよびシグナル・インテグリティ解析をサポートしています。
  • シノプシス PrimeTime —スタティックタイミング解析 :サインオフ品質のタイミングクロージャ用。
  • シノプシス RedHawk-SC —パワー・インテグリティ およびトランジスタレベルでの熱プロファイルシミュレーションにより、チップは熱限界を超えずに確実に動作することができます。
  • シノプシス Exalto, シノプシス PrimeSim および Pathfinder-SC —シグナル・インテグリティ および高密度パッケージにおける静電気放電(ESD)耐性。

2. ラックおよび基板レベルの電子機器の冷却

チップの熱分布を把握したら、エンジニアはその熱を放散できるよう、PCBおよびサーバーシャーシを設計する必要があります。Ansys の「Icepak」電子機器冷却シミュレーションソフトウェアは、電子機器の冷却シミュレーション機能を提供し、設計者が基板レベルおよびラックレベルでの熱伝達をモデル化できるようにします。これにより、ヒートシンク、コールドプレート、および内部ファンが、シリコンの特定の熱出力に合わせて最適化されることが保証されます。

3. 室内の気流とCFD

サーバールームレベルでは、数百台のラックが相互作用することで、複雑な熱的挙動が生じます。Ansys のFluent流体シミュレーションソフトウェアは、計算流体力学(CFD)シミュレーション機能を提供し、サーバールーム全体の気流をモデル化します。エンジニアは、CRACユニットの配置、ホットアイル/コールドアイルの封じ込め設計、および液体冷却マニホールドの配管経路を最適化することで、ホットスポットを解消し、冷却インフラのエネルギー消費を最小限に抑えることができます。

4. 施設レベルの構造ツインおよびデジタルツイン

最後に、施設全体をモデル化する必要があります。 Ansys 機械構造用有限要素解析ソフトウェアを用いて構造シミュレーションを行い、建物が高密度ラックや液体冷却インフラの重量に耐えられることを確認します。これらのシミュレーションモデルを組み合わせることで、Ansys のTwin Builder(シミュレーションベースのデジタルツイン プラットフォーム)を使用して施設のデジタルツイン を構築し、運用担当者がパフォーマンスをリアルタイムで監視・最適化できるようになります。

チップから施設までのシミュレーション・スタック

図5. チップから施設までのシミュレーション・スタック。 この「チップから施設」までのシミュレーション・スタックは、4つのエンジニアリング・スケールを結びつけています。すなわち、チップレベルの電力およびタイミングのサインオフ、ラックおよび基板の電子機器冷却、ルームレベルのCFDおよび冷却、そして施設レベルの構造解析および運用デジタルツインです。熱および電力の境界条件は、チップから施設へと下流へと流れ、各層の出力が次の層へと引き継がれます。

ケーススタディ

シミュレーションがもたらす理論上のメリットは、AI革命を支える物理的インフラを構築する企業によって、現場で実証されています。重要なデジタルインフラのグローバルプロバイダーであるVertivは、 Ansys( シノプシス傘下のと提携し、データセンターの冷却システムの設計をデジタルトランスフォーメーション(DX)によって変革しています。

熱交換器(HX)のコイルは、ハードウェアから熱を放散させる重要な構成要素です。その設計は複雑な課題であり、マルチフィジックス 、従来は時間のかかる実物プロトタイプの作成が必要とされていました。

Ansys の「optiSLang」プロセス統合および設計最適化ソフトウェアを導入することで、Vertivのエンジニアリングチームは、物理的なプロトタイプを繰り返し作成することなく、理想的な設計構成を迅速にシミュレーションし、材料の使用量を削減してコストを低減することができます。Ansys の「Minerva」シミュレーションプロセスおよびデータ管理Webアプリケーションにより、企業内の専門家だけでなく非専門家も自動化されたシミュレーションにアクセスできるようになり、時間の遅れの原因となっていた設計者からエンジニアへの引き継ぎの問題が解決されます。

「Ansys「業界をリードするシミュレーションソリューションは、私たちが未来に向けたソリューションを設計する上で、Vertivのビジネスモデルを牽引する一助となるでしょう。私たちの使命は、冷却や電力技術から、データセンター自体の設計へのAI導入に至るまで、世界がデータセンターを構想し、開発する方法に革命を起こすことです。」

—スティーブ・ブラックウェル、Vertiv エンジニアリング担当副社長。出典: Ansys プレスリリース、2024年11月14日。

設計段階で作成されたシミュレーションモデルは、施設が完成した後もその価値を失うことはありません。これらの高精度な3Dモデルを低次元モデル(ROM)に変換することで、エンジニアはデータセンターのリアルタイムな運用デジタルツイン を構築することができます。

Ansys のTwin Builderソフトウェアを使用することで、運用担当者はデジタルツイン を物理施設からのリアルタイムのセンサーデータに接続できます。これにより、熱性能の監視や、機器の故障を未然に予測できるほか、実稼働環境にリスクを与えることなく、運用変更による影響をシミュレーションすることができます(例:「4番通路のラック密度を20%増加させると、PUEはどのように変化するか?」)。

データセンター(デジタルツイン )は、より広範な「デジタルツイン 」というカテゴリーの一つの応用例であり、このカテゴリーは、エレクトロニクス分野の深さ(シノプシス チップ、SoC、ECU、および電子アーキテクチャ全体を対象としたeDT技術)から、システムおよび物理学の広範な領域(Ansys デジタルツイン 機械、熱、流体、電磁気、およびマルチフィジックス システム向けの技術)を網羅しています。カテゴリレベルの背景については、「エレクトロニクス・デジタルツイン とは?」を参照してください。

冗長性とティア分類

データセンターはデジタル経済の基盤であるため、ダウンタイムは絶対に許されません。施設は、ハードウェアの故障や電力・通信回線の停止時であっても継続的な運用を確保できるよう、さまざまなレベルの冗長性を備えて設計されています。

この信頼性を評価するための業界標準は、アップタイム・インスティテュートのティア分類システムです。

ティアレベル

冗長化アーキテクチャ

予想稼働時間

代表的な利用例

ティアI

基本構成:電源および冷却は単一経路。冗長構成のコンポーネントなし(N)。

99.671%(年間ダウンタイム28.8時間)

中小企業、重要度の低いワークロード。

ティアII

冗長化された構成要素:電源および冷却は単一経路だが、重要な構成要素は冗長化されている(N+1)。

99.741%(年間22時間のダウンタイム)

中堅企業;標準的なIT運用。

ティアIII

並行保守可能:複数の電源および冷却経路を備えているが、稼働しているのは1つだけ。冗長構成(N+1)。どのコンポーネントも、運用に影響を与えることなく取り外すことができる。

99.982%(年間ダウンタイム1.6時間)

大企業、重要な業務アプリケーション。

ティアIV

耐障害性:複数のアクティブな電源および冷却経路を備えています。コンポーネントは完全に冗長化されています(2Nまたは2N+1)。システム内のどこかで単一の障害が発生しても、運用に影響は及びません。

99.995%(年間ダウンタイム26.3分)

ハイパースケーラー、金融機関、ミッションクリティカルなAIワークロード。

よくある質問

データセンターとは、重要なITインフラ(演算、ストレージ、ネットワーク)を収容し、それらの機器を継続的に稼働させるために必要な冗長化された電源および冷却システムを備えるよう設計された、高度に設計された耐障害性施設です。

クラウドとはサービスモデル(インターネットを介して提供されるソフトウェア、プラットフォーム、またはインフラストラクチャ)のことですが、データセンターとは、そのクラウドインフラストラクチャが設置されている物理的な施設のことです。AWSやAzureなどのクラウドサービスを利用する場合、データはhyperscale のデータセンターのいずれかで処理されます。

従来のエンタープライズデータセンターでは、ラックあたり5~10キロワット(kW)で稼働していますが、GPUクラスター向けに設計された最新のAIデータセンターでは、ラックあたり40~100kW以上で稼働しています。hyperscale のAIキャンパス1つで、数百メガワット(MW)もの電力を消費することがあり、これは小規模な都市に相当します。

電力使用効率(PUE)は、データセンターのエネルギー効率を測る標準的な指標です。これは、施設に供給される総電力を、IT機器が直接使用する電力で割ることで算出されます。PUEが1.0の場合、効率は完璧であると言えます。最新のhyperscale 施設では、多くの場合、PUEが1.1から1.2の間となっています。

(AIやHPCのワークロードにより)ラックの電力密度が30 kWを超えると、従来の空冷では物理的に熱を十分に速く除去できなくなります。液体冷却(ダイレクト・トゥ・チップまたは浸漬冷却)では、空気よりもはるかに高い熱容量を持つ流体を使用することで、こうした極端な熱負荷を効率的に管理します。この密度以下(従来のエンタープライズ向けコンピューティングや空冷式の検証プラットフォームなど)では、空冷は依然としてその限界内で問題なく動作し続けます。

データセンターのデジタルツイン とは、高度なシミュレーションモデル(例えば Ansys Twin Builderソフトウェアなど)を用いて作成され、実際のセンサーデータと連携している物理施設の仮想レプリカです。これにより、運用担当者はリスクのない仮想環境において、パフォーマンスの監視、障害の予測、および運用変更のシミュレーションを行うことができます。

詳細を見る 概要 シノプシス + Ansys データセンターソリューション

次世代のAIデータセンターの設計と運用には、トランジスタから施設レベルに至るまで、エンジニアリング上の精密さが求められます。 シノプシス, Inc.(Nasdaq:SNPS)および Ansys、その傘下の シノプシス傘下のは、前述の「チップから施設まで」をカバーするツールセットを開発しています。

シノプシス シリコンからシステムまで のエンジニアリングソリューションを提供しています。

続きを読む

Ask BETA This experience is in beta mode. Please double check responses for accuracy.

チャットを終了する

このウィンドウを閉じると、チャット履歴が消去され、セッションが終了します。本当に このチャットを終了してもよろしいですか?