データセンター
高密度、エアフロー、安心を実現するデータセンター・ラックの設計
現代のデータセンターは、AIコンピュート、高速ファブリック、エッジ展開、持続可能性の制約の増大など、かつてないプレッシャーに直面しています。その結果、ラックの高温化、ファイバーの終端数の増加、ロールアウトの高速化など、作業スペースを確保できない状況が生じています。このブログでは、スマートなラック設計、エアフロー規律、ケーブル管理戦略により、保守性と運用の落ち着きを維持しながら、持続可能な高密度化を実現する方法について説明します。
現代のデータセンターは、4つの力によって再構築されつつある。AIクラスのコンピュートにより、ラックの電力と熱の密度がかつてないほど高まっている。爆発的なトラフィックと光インターコネクトのニーズは、400G/800Gネットワークへの急速なアップグレードを促し、各ラックにはるかに多くのファイバー終端をもたらす。ワークロードはエッジにシフトしており、事業者は無数の小規模で標準化された高密度のサイトを迅速に展開しなければならない。一方、不動産不足、持続可能性の要件、グリッドの制約により、事業者は既存のフットプリントを拡張する代わりに高密度化する必要に迫られている。
その結果、より多くのポート、より高温のラック、より迅速なロールアウトが、床面積を増やすことなく実現することになります。このような要求を満たすには、物理レイヤーを正しく設定する必要があり、ラックが中心的な役割を果たします。
ラックソリューションとケーブル管理
持続可能な高密度化の基礎となるのは、前面保守が可能でありながら、多数のポートをサポートするラックハードウェアです。技術者は、隣のコードや機器を邪魔することなく作業できる必要があります。
主な原則は以下のとおりです:
- 垂直および水平ケーブルマネージャーを使用して、構造化されたルーティングをガイドする。
- 頭上や床下の通路は、将来的な埋設を考慮し、現実的なサイズにする。
- エアフロー経路にケーブルが入り込まないようにする。
- ファイバーと銅線の最小曲げ半径を尊重する。
- 電源とデータは可能な限り分離する。
- 冷却吸気口を塞がないように設計された弛み収納を設ける。
運用の明確化も同様に重要です。ラベリング、Uナンバリング、パッチングの方法を列全体で標準化し、計装、自動文書化、AIM/DCIM統合でサポートする。これにより、ポートレベルの変更が確実に検出され、ログに記録され、作業指示書やチケットに反映される。
ホットコールドアイルの規律と封じ込め
ラックの温度は上昇しています。Uptime Instituteの2024 Global Data Center Surveyによると、7-9 kWのラックが引き続きシェアを伸ばしているが、AI/HPC環境はすでに30 kWを超えており、この傾向は加速している。AFCOMの「2024年データセンターの現状」レポートによると、平均ラック密度は前年の〜8.5kWから〜12kWに上昇している。
これらの負荷に対応するための第一歩は、エアフローの規律である。混雑したケーブル配線や不十分な配置は、バイパスエア、再循環、ホットスポット、エネルギーの浪費につながります。
ベストプラクティスは以下の通りです:
- 機器の前後を一貫して揃える。
- 冷たい通路に給気し、熱い通路に排気を戻す。
- 完全または部分的な封じ込め(列端ドア、ルーフパネル、ブランキングパネル、ブラシグロメット)を使用する。
- ケーブルの切り欠きや隙間を密閉する。
- 穴のあいた床タイルや供給グリルは、冷通路のみに限定する。
多くのオペレーターは、液冷を採用する前に、エアフローと封じ込めを改善するだけで、早期の密度向上を達成しています。
距離、クリアランス、サービスアクセス
密度は電力だけでなく、接続性においても増加している。400Gと800Gの光モジュールの出荷は2024年に4倍近くになり、51.2T/102.4Tのスイッチ・シリコンは高速ポートの爆発的な成長を促進している。AIサーバーはこれをさらに増幅させ、従来のx86サーバーの5~6個に比べ、1個あたり12個以上のイーサネットポートに広がることが多い。
コネクタ技術も進化している:
- VSFF二重コネクタ(CS、SN、MDC)は、RUあたりより多くのポートを搭載している。
- より高ファイバーのMPOフォーマット、特にMPO-16は、SR8/DR8アプリケーションを効率的にサポートします。
しかし、スペースのない高密度化はリスクを生みます。不十分な操作スペースは、小さな半径の屈曲、マイクロベンド、および損失の増加を引き起こします。窮屈なラックはMAC作業を遅らせ、MTTRを増加させ、不慮の切断のリスクを高める。
推奨事項
- 人、ドア、工具のために、1.2m(4フィート)程度のコールドアイルクリアランスを確保する。
- 機器の深さに応じて、ラックの後方に 0.6~1.0 m を確保する。
- 作業面を技術者に近づけるスライド式でロック可能なトレイを使用する。
- 密度が極端に高くなった場合は、受動的なパッチを頭上に移動する。
- はしごラックおよびトレイのためのヘッドルームを確保する。
- 封じ込めと安全のために、清潔な避難場所を確保する。
地域の法令、耐震要件、およびアクセシビリティの規則により、これらの最低基準が高くなる場合がある。
通気と放熱
キャビネットのドアは通気性が必要です。通気孔が少なすぎると、圧力損失が増加し、サーバーファンを高速回転させることになり、吸気温度が上昇し、エネルギー使用量と騒音が増加し、PUEが悪化します。背圧はまた、密閉されていない隙間からの再循環を促し、最終的にラックの密度を制限するホットスポットを作り出します。
ガイドライン
- 空冷環境では、70~80%の開口面積を持つ前面および背面ドアを指定する。
- 未使用のラックスペースにはブランキングパネルを設置する。
- モデリングにより利点が示された場合は、後部ドアの熱交換器、煙突、または強化された封じ込めを検討する。
オペレーターはしばしば、ドアを突っ張ることでエアフローの問題を解決しようとするが、これは封じ込め、冷却効率、物理的セキュリティを損なう。適切な穿孔は、そのような回避策の必要性を排除する。
すべてをまとめる
高密度のコンピュートとネットワークは、保守性や安定性を犠牲にする必要はありません。ラック、通路、封じ込め、クリアランス、キャビネットの選択を単一の統合システムとして設計すれば、オペレータは、2日目の運用を予測可能な状態に保ちながら、RUあたりのポート数とラック電力を安全に増やすことができます。
ラックを指定またはアップグレードする際の主な推奨事項
- ファイバー密度:ファイバー密度:144LC(UHD)または96LC(HD)をサポートする1Uパネルを選択し、独立したスライド式のロック可能なトレイを使用する。
- ケーブル配線:オーバーヘッドパッチフレーム(≥4U)を使用して、高密度パッチングをアクティブラックから移動します。
- 自動化:DCIM/ITSMと統合されたAutomated Infrastructure Management (AIM)を使用し、ポートレベルのリアルタイム可視化、作業指示、監査、アラートを行う。
- 銅線:必要に応じて、背面ケーブルマネジメント、アングルフロント、ヒンジ付きシャッターを統合した1U 48ポートCat6Aパネルを使用。
- ラック・エンベロープ:ラックは、19インチおよびETSIフォーマット、幅600~900 mm、複数の高さとドアタイプを用意し、封じ込め戦略や部屋のレイアウトに合わせられるようにします。
これらの要素をすべて組み合わせることで、オペレーターは必要な密度とエアフロー性能を確保し、チームが必要とする運用上の安心感を得ることができます。