機架 CDU
3 秒看懂
機架 CDU = AI 機櫃裡的”液冷心臟”——它架在機櫃內部或緊貼機櫃,一端接樓宇冷水管路(一次側),另一端把冷卻液精準泵入 GPU 冷板(二次側),把每機櫃 100 kW+ 的熱浪”搬運”出去。沒有它,GB200 NVL72 們開機幾秒就會撞溫度牆降頻。
3 分鐘產業解釋
為什麼 AI 時代突然需要它?
| 時間線 | 單機櫃功率 | 冷卻方式 |
|---|---|---|
| 2018 年(風冷時代) | 8–15 kW | 機房精密空調、行級空調 |
| 2022–2023(A100/H100 叢集) | 30–60 kW | 後門熱交換器 + 部分液冷 |
| 2024–2025(GB200 NVL72/GB300) | 100–130 kW+ [廠商白皮書估算] | 必須液冷,機架 CDU 成標配 |
核心邏輯鏈
- GPU 功率飆升:單顆 B200 GPU TDP 約 1000 W [廠商公告],NVL72 機櫃 72 顆 GPU + 網路/儲存,總功耗輕鬆超 120 kW。
- 風冷天花板:傳統風冷在 30–40 kW/櫃以上時,散熱面積和風量需求呈指數增長,噪音、能耗急劇惡化。
- 液冷接管:用液體(水的質量比熱容約為空氣的4倍)直接在晶片冷板吸熱,效率碾壓風冷。
- CDU 是橋樑:它隔離一次側(樓宇冷水,通常含乙醇/乙二醇,不可直接進伺服器)和二次側(去離子水或介電液體),通過板式換熱器傳熱,同時監控流量、壓力、溫度、水質。
機架 CDU vs. 行級 CDU vs. 室外冷水機組
| 維度 | 機架 CDU | 行級 CDU | 室外冷水機組 |
|---|---|---|---|
| 部署位置 | 機櫃內/緊貼機櫃 | 一排機櫃末端 | 室外/機房外 |
| 覆蓋機櫃數 | 通常 1 櫃 | 4–8 櫃 | 整棟/整個資料中心 |
| 單臺散熱能力 | 較低(單櫃級別) | 中等 | 極高 |
| 優勢 | 就近冷卻、布管短、故障域小 | 折中方案 | 規模效應好 |
| 劣勢 | 單點成本相對高 | 管路較長 | 前端仍需 CDU 分配 |
15 分鐘專家深入
一、典型機架 CDU 的內部架構
┌─────────────────────────────────── Rack CDU ───────────────────────────────────┐
│ │
│ 一次側入口(FWS) 板式換熱器(PHE) 二次側出口(→冷板) │
│ ┌──────────┐ ┌────────────┐ ┌──────────┐ │
│ │ Facility │──→ 流量閥 ──→│ Plate Heat│──→ ──────→│ To GPU │ │
│ │ Water │ │ Exchanger │ │ Cold │ │
│ │ Supply │←── ─────────│ │←── ←─────│ Plates │ │
│ └──────────┘ └────────────┘ └──────────┘ │
│ ↑ │
│ ┌────┴────┐ │
│ │ 二次側 │ · 變頻泵(Pump) │
│ │ 迴圈泵 │ · 膨脹罐(Expansion Tank) │
│ │ + 控制 │ · 過濾器(Filter/Deionizer) │
│ └─────────┘ · 感測器組(T/P/Flow/Leak detect) │
│ · 控制板(帶BMC/SNMP上報告警) │
│ │
└────────────────────────────────────────────────────────────────────────────────┘
關鍵子系統說明:
| 子系統 | 功能 | 技術要點 |
|---|---|---|
| 板式換熱器 (PHE) | 一次側與二次側熱交換,物理隔離兩種冷卻液 | 常見不鏽鋼/鈦合金板片,換熱效率高,緊湊 |
| 二次側迴圈泵 | 驅動冷卻液流經 GPU 冷板 | 多采用變頻離心泵或齒輪泵,冗餘配置(N+1) |
| 去離子/過濾 | 保持二次側冷卻液低電導率,防冷板堵塞/電化學腐蝕 | 電導率通常控制在極低水平(具體閾值因廠商而異) |
| 膨脹罐 | 吸收溫度變化導致的液體體積波動 | 密閉加壓設計 |
| 洩漏檢測 | 精準定位液路洩漏 | 線纜式/點式感測器,覆蓋所有接頭 |
| 監控/管理 | 即時採集 P/T/Flow,上報 DCIM/BMC | 支援 SNMP/Redfish/IPMI,與叢集管理系統聯動 |
二、一次側與二次側的溫度梯度
這是理解 CDU 效能的核心:
溫度示意(定性,非精確值):
一次側冷水入口 ≈ 30–35°C (廠商/建築條件各異)
↓ [PHE 換熱,溫升 5–10°C]
一次側熱水出口 ≈ 35–45°C
↓
══════════════════════════
↓
二次側暖水入口(冷板出水) ≈ 45–55°C [估算,取決於GPU負載]
↓ [PHE 換熱,降溫]
二次側冷水出口(冷板進水) ≈ 30–40°C [估算]
↓
→ GPU 冷板吸熱 → 回到暖水入口
關鍵技術趨勢 — 提高一次側進水溫度:
- 傳統做法要求一次側冷水 ≤ 25°C(高成本、需機械製冷)。
- 新一代 AI 冷板設計可在一次側 32–45°C 條件下工作(取決於 GPU 節流溫度閾值),這使得自然冷卻(乾冷器/冷卻塔)+ CDU 的組合成為可能,大幅降低 PUE。
- 部分前沿方案探索直接用一次側熱水冷卻,省去 PHE 溫差損失。
三、流量與熱負荷關係
核心公式(熱力學基本方程):
Q = ṁ × Cp × ΔT
其中:
Q = 散熱量 (kW)
ṁ = 質量流量 (kg/s)
Cp = 比熱容 (水 ≈ 4.18 kJ/kg·K)
ΔT = 冷卻液進出口溫差 (K)
定性推演(以假設 120 kW 機櫃為例):
- 若 ΔT 控制在 10°C,則所需流量 ṁ = Q/(Cp×ΔT) ≈ 120/(4.18×10) ≈ 2.87 kg/s ≈ 172 L/min [計算值,非產品規格]
- 實際系統需考慮泵揚程、管路壓降、冷板流阻,總流量可能需要留 20–30% 餘量
- 這意味著 CDU 的泵功率、PHE 尺寸、管徑都必須匹配這個量級
四、與 NVIDIA GB200 NVL72 的適配
NVIDIA GB200 NVL72 是當前機架 CDU 需求的最主要驅動力:
- NVL72 是一個 72-GPU 的”超機櫃”(實際跨多個物理機櫃),總功耗超 120 kW [廠商公告估算]。
- 每個 Compute Tray 內建液冷冷板,GB200 NVL72 參考架構已整合冷卻液分配單元(CDU)作為機架內部元件,為系統提供冷卻液迴圈。
- NVIDIA 在參考設計中指定液冷為唯一散熱方式(非選配)。
- 一個 NVL72 系統可能需要 1–2 臺機架級 CDU 或配合行級 CDU(具體配比因 ODM 設計而異)。
技術原理(最深一層)
冷板-CDU 系統的完整熱阻鏈
GPU Junction → TIM → Cold Plate Base → Coolant → CDU PHE → Facility Water → Cooling Tower
(Tj) (Rtim) (Rplate) (Rconv) (Rphe) (Rfacility) (Rambient)
總熱阻:Rtotal = Rtim + Rplate + Rconv + Rphe + Rfacility + Rambient
↓
Tj = Tambient + Q × Rtotal
↓
目標:Tj < GPU throttle threshold (通常 ~95–100°C,具體取決於 GPU 型號)
CDU 的設計目標就是最小化其中 Rphe + Rplate 對應的溫升,同時保證可靠性。
關鍵設計引數(定性說明)
| 引數 | 設計考量 |
|---|---|
| 散熱容量 (kW) | 必須覆蓋機櫃最大功耗 + 餘量 |
| 一次側/二次側流量 | 匹配冷板流阻曲線,保證足夠 ΔT |
| 泵揚程 | 克服冷板陣列 + 管路 + PHE 的總壓降 |
| PHE 效率 | 通常 > 95%(板式換熱器的固有優勢) |
| 漏液檢測響應時間 | 目標秒級響應,觸發關泵/告警 |
| 外形尺寸 | 必須適配標準 19” 機櫃空間(通常佔 6U–12U 或獨立安裝於櫃底/櫃側) |
| 冗餘 | 泵 N+1、PHE 可選冗餘、雙電源、雙控制板 |
| 管理介面 | Redfish/SNMP,融入資料中心 DCIM |
| 噪音 | 泵執行噪音,需控制在機房可接受範圍 |
變頻泵控制策略
GPU 負載 ↑
↓
溫度感測器檢測到 ΔT 變化
↓
┌─────────────────────────┐
│ CDU 控制器 (PID/MPC) │
│ 調節泵轉速 → 流量 ↑ │
│ 調節一次側閥門 → 流量 ↑│
└─────────────────────────┘
↓
維持冷板出口溫度在設定值
- 變頻泵在低負載時降速節能,高負載時全速執行
- 這是 CDU 能效最佳化的核心邏輯之一
- 部分方案引入前饋控制(基於 GPU 功耗預測提前調節流量)
技術演進史
| 階段 | 時間 | 核心變化 |
|---|---|---|
| 風冷統治期 | 2010–2020 | 資料中心以風冷為主,液冷僅用於超算(如 IBM Blue Gene) |
| 後門換熱器過渡期 | 2018–2022 | 後門液冷換熱器(RDHx)出現,CDU 以行級為主 |
| 冷板液冷元年 | 2022–2023 | H100 叢集開始規模採用直接液冷(D2C),行級 CDU 成主流 |
| 機架 CDU 爆發期 | 2024–2025 | GB200 NVL72 等超大功耗機櫃推動 CDU 下沉到機架級 |
| 未來趨勢 | 2026+ | 浸沒式液冷、單相/兩相冷卻可能分流部分場景;CDU 與電源/網路深度整合 |
技術路線對比
| 維度 | 機架 CDU | 行級 CDU | 浸沒式 CDU | 後門換熱器 (RDHx) |
|---|---|---|---|---|
| 適用單櫃功率 | 50–150 kW [估算] | 30–100 kW [估算] | 50–200 kW+ [估算] | 15–45 kW [估算] |
| 冷卻方式 | 直接液冷(D2C 冷板) | 直接液冷(D2C 冷板) | 全浸沒 | 間接(空氣→液體) |
| 改造成本 | 中(需加冷板+管路) | 中 | 高(需全新機櫃/機架) | 低(替換後門) |
| 散熱效率 | 高 | 高 | 極高 | 中 |
| 運維複雜度 | 中(管路+防漏) | 中 | 高(維護浸沒液) | 低 |
| 與現有伺服器相容 | 需改造(加冷板) | 需改造 | 需全新設計 | 無需改造 |
| 冗餘與故障域 | 單櫃獨立,故障域小 | 多櫃共享,故障域較大 | 單櫃/多櫃 | 單櫃 |
| 當前 AI 適配度 | ★★★★★ | ★★★★ | ★★★(逐步成熟) | ★★(功率不夠) |
上下游
產業鏈全景
上游(核心部件) 中游(CDU 整合/整機) 下游(應用端)
───────────────── ────────────────── ─────────────────
泵體/泵頭 CDU 整機廠商 雲端廠商 / CSP
· 多家泵廠商 · 超大規模資料中心
板式換熱器(PHE) 冷板廠商(與CDU協同) · AI 訓練/推論叢集
· 換熱器專業廠商 · HPC 資料中心
閥門/接頭/管路 伺服器 ODM
· 流體控制廠商 · 系統整合 系統整合商
感測器(溫/壓/流量/漏液) · 定製化CDU+機櫃方案 · 機房建設
去離子器/濾芯 · EPC 總包
控制板/BMC
關鍵上游瓶頸
| 部件 | 供應情況 | 風險點 |
|---|---|---|
| 變頻泵 | 供應充足,但高效能小尺寸泵有一定稀缺性 | 汽蝕、可靠性驗證週期長 |
| 板式換熱器 | 成熟供應鏈,但大功率小型化有技術門檻 | 材質(鈦合金/不鏽鋼)成本波動 |
| 快接頭(Quick Disconnect) | 關鍵卡脖子之一,需無滴漏 | 高階產品被少數廠商主導 |
| 去離子水/介電液 | 介電液體供應商有限 | 兩相冷卻液體環保法規 |
關鍵指標
選型機架 CDU 時應關注的核心引數(定性說明,無具體廠商型號規格):
| 指標 | 說明 |
|---|---|
| 額定散熱容量 (kW) | 能持續帶走的最大熱量,需覆蓋機櫃峰值功耗 + 餘量(建議 ≥ 1.2×) |
| 一次側進水溫度範圍 | 決定能否用自然冷卻,越寬越靈活 |
| 二次側流量範圍 | 需匹配冷板流阻曲線 |
| 泵功耗 / COP | CDU 自身耗電佔比,直接影響 PUE |
| MTBF / 可靠性 | 泵、PHE、控制板的平均無故障時間 |
| 漏液檢測靈敏度 | 響應時間、定位精度 |
| 外形與安裝方式 | 櫃內(佔用 U 數)、櫃頂、櫃側、獨立落地 |
| 管理介面 | Redfish / SNMP / Modbus 等,與 DCIM 整合能力 |
| 冗餘配置 | 泵 N+1、雙電源、雙控制器 |
| 噪音 (dBA) | 櫃內部署對運維人員影響 |
供需與市場資料
需求驅動
- AI 算力需求:全球 AI 訓練/推論算力需求以 [年均約 30-50%+ 速度增長](多份行業報告口徑不一,此處定性),每一代 GPU 功耗持續攀升。
- 單機櫃功率密度:從 10 kW→30 kW→100 kW+,液冷滲透率快速提升。
- GB200/GB300 出貨:NVIDIA GB200 NVL72 在 2024 下半年起規模出貨,每個 NVL72 系統至少需要 1–2 臺 CDU [ODM 設計差異]。
市場規模(需標註不確定性)
- 液冷 CDU 市場(含行級+機架級)目前處於快速增長期,多家行業研究機構估算 2025 年全球資料中心液冷市場(含 CDU、冷板、管路等)規模在 數十億美元 量級 [行業報告估算,具體數字因口徑差異較大]。
- 機架 CDU 單臺價格區間較寬,取決於散熱容量、冗餘配置等,數千至數萬美元不等 [供應鏈估算,具體價格因客戶/配置差異大]。
供給格局
- CDU 整機供應商數量在快速增長,包括傳統熱管理廠商、電源廠商跨界、以及新興專業液冷公司。
- 產能瓶頸主要在上游部件(泵、快接頭、PHE 板片)和整體系統整合測試能力。
代表公司與資本對映
| 公司 | 角色 | 關聯方向 | 備註 |
|---|---|---|---|
| Vertiv (VRT) | 電源+熱管理老牌,版面配置 CDU | 全棧資料中心基礎設施 | 已推出液冷 CDU 產品線 |
| Schneider Electric (SU.PA) | 資料中心基礎設施全棧 | 包括 CDU/液冷方案 | 旗下 APC 品牌 |
| CoolIT Systems | 專業液冷廠商(D2C + CDU) | 專注液冷,與多家 ODM 合作 | 非上市 |
| ZutaCore | 無水兩相液冷方案 | 差異化路線(介電液兩相) | 非上市 |
| GRC (Green Revolution Cooling) | 浸沒式液冷先驅 | 浸沒 CDU | 非上市 |
| Motivair | 專業冷卻裝置 | CDU/冷水機組 | 非上市 |
| 維諦技術 (300682.SZ) | 中國液冷 CDU 供應商 | A 股對映 | 國內液冷概念標的 |
| 英維克 (002837.SZ) | 中國精密溫控 | 液冷 CDU + 機房溫控 | A 股對映 |
| 曙光數創 (872808.BJ) | 液冷伺服器+CDU | 北交所液冷標的 | 中科曙光系 |
| 臺達電 (2308.TW) | 電源+散熱方案 | CDU 產品 | 臺股 |
| 雙鴻 / 奇鋐 / 力致 | 散熱模組 | 伺服器散熱供應鏈 | 臺股,部分已切入液冷 |
⚠️ 以上僅為行業參與者的概覽,不構成投資建議。具體公司產品線、營收佔比、技術能力需進一步核實。
投資邏輯
確定性較高的主線
- “液冷必選”邏輯:GB200 NVL72 及後續平台已明確要求液冷,CDU 從”可選升級”變為”標準配置”,滲透率從 ~5% → 預計 2025 年在 AI 叢集中達到很高水平 [定性判斷]。
- 量價齊升:單機櫃 CDU 用量增加(功率越大需越多/越大 CDU),單臺價值量高於傳統風冷散熱。
- 供應鏈瓶頸創造溢價:快接頭、高效能泵、小型化 PHE 等上游部件有供應集中度,能卡位的供應商享有溢價。
需要追蹤的變數
- 浸沒式液冷是否分流:如果浸沒式大規模落地,D2C+CDU 路線的市場份額可能被擠壓(但浸沒式自身也有 CDU 需求)。
- 一次側冷卻技術進步:如果冷板能耐受更高進水溫度,可能減少對 CDU 換熱效能的要求,拉低單臺價值量。
- 國產替代:中國廠商在泵、PHE、快接頭等部件的自主化進度。
- AI 算力需求週期:GPU 出貨節奏直接影響 CDU 需求。
常見誤讀糾偏
❌ 誤讀一:“CDU 就是冷水機組”
糾偏:冷水機組(Chiller)是製備冷水的裝置,通常部署在室外/機房外。CDU 是分配冷卻液的單元,部署在機櫃級別。二者是串聯關係:Chiller → CDU → 冷板。CDU 的一次側可以接 Chiller 的冷水,也可以接冷卻塔的自然冷卻水。二者功能完全不同,不可混淆。
❌ 誤讀二:“機架 CDU 每個機櫃必須配一臺”
糾偏:不一定。配置取決於單櫃功耗和 CDU 散熱容量。低功耗機櫃可能 2–3 個櫃共享一臺 CDU;超高功耗機櫃(如 NVL72)可能一臺 CDU 管一個機櫃甚至不夠,需要兩臺或行級 CDU。ODM 的參考設計各不相同,需具體分析。
❌ 誤讀三:“液冷系統不會有漏液風險”
糾偏:液冷系統的核心風險之一就是漏液。管路接頭、冷板焊點、快接頭都是潛在洩漏點。機架 CDU 內建的漏液檢測感測器是關鍵安全冗餘,但漏液事件仍偶有發生。業界通常採用去離子水(低電導率)+ 快速關斷閥 + 漏液檢測纜三重防護。完全消除風險是不現實的,但可將損失降到最低。
❌ 誤讀四:“CDU 技術含量低,誰都能做”
糾偏:單看任何一個子系統(泵、PHE、閥門),技術都不算前沿。但 CDU 的核心壁壘在於:① 系統整合能力(熱、流、電、控的協同);② 長期可靠性驗證(資料中心要求 7×24 執行 10 年+);③ 與伺服器/機櫃的深度適配(管路版面配置、介面標準、BMC 對接);④ 漏液防護和安全冗餘設計。新入者在可靠性驗證和客戶信任方面有較長的爬坡期。
學習路徑
入門(30 分鐘)
├─ 閱讀:Vertiv / CoolIT / Schneider 官網液冷 CDU 產品頁
├─ 影片:YouTube 搜 "data center CDU liquid cooling" 看實物拆解
└─ 認知:理解一次側/二次側、冷板、CDU 三者關係
進階(2–4 小時)
├─ 閱讀:NVIDIA GB200 NVL72 架構白皮書(液冷部分)
├─ 閱讀:ASHRAE 資料中心液冷設計指南(TC 9.9)
└─ 實操思維:計算一個 120 kW 機櫃需要的流量、泵揚程
深度(持續)
├─ 追蹤:液冷廠商技術部落格 / 白皮書更新
├─ 調研:與 CDU 廠商/ODM 交流,瞭解實際部署痛點
└─ 研究:兩相冷卻、浸沒冷卻與 D2C CDU 的技術路線博弈
一句話總結
機架 CDU 是 AI 基礎設施液冷閉環中不可替代的”熱搬運工”,在每機櫃功耗突破 100 kW 的 GB200 時代,它從幕後走向臺前,成為影響算力部署密度、PUE 和運維可靠性的關鍵卡位環節。
延伸閱讀與來源
| 來源 | 內容 | 說明 |
|---|---|---|
| NVIDIA GB200 NVL72 架構文件 | 系統功耗與液冷設計需求 | 廠商一手資料 |
| ASHRAE TC 9.9 系列指南 | 資料中心熱管理最佳實踐 | 行業標準 |
| Vertiv / Schneider Electric / CoolIT 官網 | CDU 產品規格與技術白皮書 | 廠商產品資訊 |
| 《資料中心基礎設施管理(DCIM)》相關教材 | 冷卻系統監控與管理 | 學術參考 |
| 行業研究機構液冷市場報告 | 市場規模與滲透率估算 | 需注意口徑差異 |
⚠️ 免責宣告:本文為技術概念學習材料,不構成任何投資建議。文中所有市場資料、估算值均基於公開資訊推斷,可能存在偏差,請以最新官方揭露為準。