網路層 開放閱讀

Fabric Manager

Fabric Manager

概念 ID
fabric-manager
更新時間
2026-05-29
來源數量
待補

Fabric Manager

3 秒看懂

Fabric Manager 是萬卡級 AI 叢集中負責 GPU/NPU 高速網際網路絡的資源抽象、路徑編排與故障自愈 的系統軟體。它讓數千張加速卡作為一個邏輯整體協同工作,是決定AI基礎設施有效算力產出率的核心控制平面。

3 分鐘產業解釋

當大型模型引數規模從千億邁向萬億,單張加速卡已無力獨立承載。訓練這類模型需要將計算圖切分到數千乃至數萬張 GPU/NPU 上並行執行,這對晶片間的通訊效率提出了極端要求。如果說高速物理鏈路(如 NVLink、InfiniBand、PCIe)是“高速公路”,那麼 Fabric Manager 就是整套 “智慧交通管制系統”

它的工作分為三個層次:

  • 物理層資源發現與註冊:系統上電時,Fabric Manager 自動掃描每張 GPU、每個 NVSwitch 交換器、每條 NVLink 鏈路、每塊 ConnectX 智慧網絡卡,建立精確到埠的全域性拓撲資料庫。它知道“誰通過哪條路連線了誰”,並即時追蹤鏈路健康狀態。
  • 邏輯層資源池化與分配:作業發起時,Fabric Manager 根據通訊需求(如 AllReduce 環所需頻寬)從物理資源池中切分出邏輯上的“計算域”。這個域對上層架構而言是一臺完整的“虛擬超級計算機”,內部擁有高頻寬、低延遲的專屬通訊網路。
  • 控制層路徑編排與容錯:作業執行中,Fabric Manager 持續監控誤位元速率、心跳超時等異常訊號。一旦檢測到故障埠,它可在毫秒至秒級完成路徑切換或裝置隔離,通知上層架構進行任務重試,保障數月級的訓練任務不會被單點硬體故障打斷。

在產業實踐中,NVIDIA 將此功能實體化為執行在 DGX 主機 CPU 上的 nvidia-fabricmanager 系統服務,與 GPU 驅動、NVSwitch 微碼、NCCL 通訊庫深度耦合。AMD 在 ROCm 平台中通過韌體與驅動組合提供類似能力。各雲端廠商的自研晶片(如 Google TPU、AWS Trainium)則採用閉源內部方案。無論技術路線如何,當叢集規模突破千卡時,缺少 Fabric Manager 的系統將面臨通訊效率急速衰減與故障恢復崩潰的雙重風險,可謂“無中樞,不成叢集”。

技術原理

Fabric Manager 的本質是執行在分散式系統控制面的 “帶效能感知的軟體定義互聯(SDI)控制器” 。其核心邏輯可抽象為四個階段構成的閉環:

1. 全拓撲發現與建模 系統啟動時,管理服務通過帶外管理網路或資料面內嵌發現協議,逐級列舉所有網路端點(GPU、網絡卡)、交換節點(NVSwitch、InfiniBand Switch)及其埠互連關係。採集的資訊包括:裝置序列號、韌體版本、埠速率上限、鏈路誤位元速率閾值、物理插槽位置等。將這些原始資訊建置為一張帶權有向圖,節點代表裝置,邊的權重綜合了頻寬、延遲、當前誤位元速率和預留狀態。

2. 資源抽象與池化 物理拓撲資料被抽象為統一資源模型,每個 NVLink 埠、每段 RDMA 路徑都被表示為具有“頻寬”、“延遲”、“損耗容忍度”屬性的資源物件。所有資源匯入全域性資源池,由 Fabric Manager 統一管理。這一層遮蔽了底層硬體的具體型號和拓撲差異,向上層作業暴露標準化的“邏輯通訊通道”申請介面。

3. 路徑計算與配置下發 當排程器(如 Slurm、K8s)為一組 GPU 分配了作業後,Fabric Manager 根據 NCCL 等通訊庫上報的集合通訊模式(AllReduce、Reduce-Scatter、All-to-All 等),在資源池中計算滿足頻寬、延遲和故障域隔離要求的最優路徑集合。例如,對 AllReduce 樹,優先分配相同 NVSwitch 域內的直連鏈路,避免跨交換器跳轉。計算完成後,控制器將路由表、QoS 策略、流量整形引數通過驅動介面或暫存器直寫的方式,下發到每個 NVSwitch 和智慧網絡卡的硬體轉發表項中。

4. 執行時監控與自愈 資料平面傳輸期間,Fabric Manager 持續拉取各埠效能計數器(頻寬利用率、錯誤幀計數、重傳次數、鏈路溫度)。利用滑動視窗演算法檢測異常事件(如誤位元速率在 10 秒內連續超過閾值),觸發告警並執行預配置的恢復策略:輕則降低鏈路優先順序、調整負載均衡權重;重則將故障埠從可用資源池中剔除,重算路由並通知通訊庫暫停/恢復該環上的資料傳輸。整個過程對上層訓練程式碼透明。

此架構決定了 Fabric Manager 的效能直接關聯叢集的 有效算力利用率(MFU) 。一個設計優良的 Fabric Manager 可在鏈路故障時仍將 MFU 保持在 95% 以上,而設計欠缺的方案可能導致 MFU 跌落至 70% 以下——相當於數千張 GPU 在空轉。

關鍵引數

由於 Fabric Manager 屬於系統軟體,無獨立硬體規格書,其能力通過叢集級指標間接量化。以下引數基於 NVIDIA DGX SuperPOD 公開架構及行業通識整理,部分細節標註來源:

1. 管理規模(Scale)

  • 單管理域支援最大 GPU 數量:NVIDIA 當前公開的 NVSwitch 域內最大為 256 張 GPU(GH200 NVL32 架構下,一個 NVLink 域可連線 32 個節點,每節點 8 張 GPU)。跨節點擴充套件時,通過 InfiniBand 網路可聚合到萬卡級。具體上限取決於管理通道的處理能力和資料庫效能,公開資料未見明確數字。
  • 拓撲節點發現時間:子葉交換器與 GPU 的列舉通常在分鐘級(千卡叢集約 3-5 分鐘),參考 NVIDIA BCM 參考實現推測,公開資料未見官方精確資料。

2. 故障恢復指標(RAS)

  • 鏈路故障檢測延遲:NVLink 埠級誤位元速率監測週期通常為毫秒級,行業經驗值為 100ms 至 1s(基於 InfiniBand/RoCE 運維實踐)。
  • 路徑切換時間:從檢測到故障到資料流重路由完成,NVIDIA 在 DGX 平台宣傳可做到“對應用透明”,公開資料未見精確至微秒/毫秒的官方數字。傳統 InfiniBand 網路路徑切換約在數十毫秒級。
  • 故障隔離成功率:萬卡叢集月均出現數次鏈路抖動或埠失效屬於常態,目標是將 99.9% 以上的故障限制在作業重試而不導致訓練任務整體失敗。該資料為產業口徑,無單獨產品級報告。

3. 效能最佳化指標

  • 集合通訊頻寬利用率:AllReduce 操作中,實際達到的穩態頻寬與埠理論速率之比。在最佳化的 NVLink + InfiniBand 網路中,典型可達 90%-95%(基於 Nsight Systems 分析工具的行業報告),NVIDIA 在 SuperPOD 宣傳材料中稱可達 97%。
  • 尾部延遲控制:集合通訊中最大單包延遲對訓練步長時間影響顯著。Fabric Manager 通過 QoS 優先順序佇列將控制流與資料流隔離,目標將擁塞導致的 p99 延遲增加控制在 10% 以內(行業參考值)。
  • 資源分配效率:從作業提交通訊資源請求到邏輯域就緒的時間。對於靜態配置的 NVLink 域,通常在秒級完成;對於跨節點的動態 RoCE 網路,需要提前數分鐘進行資源預留,公開資料未見精確基準測試。

4. 相容性與生態指標

  • 支援的計算架構:必須原生整合 PyTorch(通過 NCCL)、TensorFlow;NVIDIA 生態內需支援 CUDA 工具鏈;AMD ROCm 對應支援 RCCL。版本相容矩陣由各廠商獨立維護。
  • 作業系統支援:通常繫結特定 Linux 發行版(NVIDIA 推薦 DGX OS 或 Ubuntu 特定 LTS 版本)和核心版本,跨平台能力有限。

技術路線

全球 AI 互聯管理軟體的技術路線已分化為三條路徑,分別對應不同的產業生態與商業模式:

路線一:NVIDIA 閉環一體化方案 以 nvidia-fabricmanager 為核心,深度耦合自有 GPU(Hopper、Blackwell 架構)、NVSwitch 交換晶片、ConnectX 智慧網絡卡和 InfiniBand 交換器。其特點是 “全棧垂直整合”

  • 軟體與硬體同步設計,GPU 驅動層直接暴露 NVLink 管理介面,NCCL 通訊庫可直接呼叫 Fabric Manager 的路徑分配 API。
  • 最佳化程度最高,在 DGX SuperPOD 等參考架構中可實現接近線性的單次 AllReduce 加速比。
  • 代價是封閉生態,使用者必須採用全套 NVIDIA 硬體和軟體棧,無法獨立替換其中某一層。

路線二:基於開放標準的模組化方案 由雲端廠商(AWS、Azure、GCP、Oracle 等)和超大規模使用者(Meta 等)主導,部分引入博通、Marvell 等商用交換晶片。其特點為 “開源/自研組合”

  • 物理層使用標準 RoCE v2 乙太網路或自研互聯協議(如 Google 的 ICI),管理軟體在自研控制平面中實現。
  • 網路管理模組與特定硬體(如自研 AI 加速器、定製 BMC)整合,但不對外商用,屬於內部基礎設施競爭力。
  • 優點是可靈活引入多供應商,降低供應鏈風險;缺點是自研投入極大,效能最佳化週期長,且無產業標準化組織推動互操作。

路線三:傳統 HPC 網路管理延伸 使用 InfiniBand 或高效能乙太網路交換器的內建管理功能(如 MLNX_OFED、SONiC),輔以 Slurm、PBS Pro 等排程器自帶的簡單拓撲感知外掛。其侷限性明顯:

  • 僅管理傳統的“節點-交換器”連線,對 GPU 到 NVSwitch 的片內互聯缺乏感知,無法進行 GPU 顆粒度的路徑最佳化。
  • 不支援 GPU Direct RDMA 等高階特性的精細化配置,集合通訊最佳化仍需人工手動調整拓撲檔案和 NCCL 環境變數。
  • 適用於千卡以下叢集或非 AI 負載的通用 HPC 場景,但在萬卡大型模型訓練中難以勝任。

路線演進趨勢 多家產業分析指出,未來三年可能出現 “統一雲端作業系統” 趨勢,將 Fabric Manager、叢集排程器、分散式儲存控制器整合為單一平台,形成“算力、網路、儲存”三面一體排程的 AI 原生基礎設施 OS。能否實現,取決於供應鏈開放程度和各廠商的投入決心。

上游

Fabric Manager 作為系統軟體,其上游由“被管理物件”的硬體和韌體組成。這些元件自身的技術進步直接擴充套件 Fabric Manager 的能力邊界。

1. GPU/NPU 計算晶片(NVIDIA NVDA、AMD AMD、Intel INTC、各雲端廠商自研) 每代新架構 GPU 引入更高頻寬的互聯介面(如 Blackwell 引入的 NVLink 5.0 支援雙向 3.6TB/s),迫使 Fabric Manager 更新拓撲發現協議和路徑計算演算法。同時,GPU 內部的片上網路(NoC)管理複雜度也在上升。

2. 互聯交換晶片(NVIDIA NVSwitch、博通 AVGO、Marvell MRVL) NVSwitch 是當前唯一大規模部署的 GPU 專用交換晶片,其微碼版本決定了 Fabric Manager 能下發的路由策略粒度。博通的 Tomahawk 和 Jericho 系列晶片是開放網路中 RDMA 管理的硬體基礎,其可程式設計特性(如 Trident 的 Tofino 系列)允許使用者定製部分管理邏輯,但截至目前,公開資料未見頭部 AI 叢集在核心訓練網路上使用除 NVIDIA/自研以外的商用交換晶片方案。

3. 智慧網絡卡/DPU(NVIDIA ConnectX/BlueField、Intel IPU、AMD Pensando) Data Processing Unit (DPU) 的出現使得部分 Fabric 管理功能可以從主機 CPU 解除安裝到邊緣裝置。例如,BlueField-3 可執行專用於通訊路徑監控和故障恢復的 Arm 核程式,減少對主機 CPU 的干擾。這是“管理功能離散化”的前沿方向。2023 年至 2024 年,NVIDIA DOCA 架構持續迭代,推動此趨勢。

4. 光模組與有源電纜(中際旭創等光模組廠商) 光模組是鏈路故障率最高的部件之一。其誤位元速率、溫度變化和老化曲線直接定義 Fabric Manager 故障檢測模型的引數。400G/800G/1.6T 光模組的量產進度(2024 年為 800G 規模部署元年,預計 1.6T 在 2025 年 Q4 起量)決定管理軟體需要適配的埠速率上限。資料來源:公開產業鏈調研及光模組廠商投資者交流紀要(不構成投資建議)。

下游

Fabric Manager 不面對終端使用者直接互動,其下游是呼叫其服務的一系列系統軟體和工具鏈。

1. 分散式通訊庫(NCCL、RCCL、Gloo) 這是最緊密的下游元件。NCCL(NVIDIA Collective Communications Library)在執行 AllReduce 前,會向 Fabric Manager 查詢當前拓撲,獲取最優 Ring/Tree 結構,並請求為通訊環預留埠頻寬。NCCL 版本與 Fabric Manager 版本通常需嚴格匹配(如 CUDA 工具包內的版本號約束),否則會出現效能退化或功能缺失。

2. 深度學習架構(PyTorch、JAX、TensorFlow) 架構的分散式後端通過 torch.distributed 介面間接呼叫 NCCL。Fabric Manager 的最佳化效果直接影響架構層面觀測到的每步訓練耗時(Step Time)。例如,JAX 的 SPMD 並行對網路拓撲的敏感性更高,對 Fabric Manager 路徑分配的質量要求更苛刻。

3. 叢集排程與資源管理器(Slurm、Kubernetes、HashiCorp Nomad、雲端原生 MLOps 平台) 排程器分配 GPU 節點後,需通知 Fabric Manager 為這批節點建置專屬的計算域。當前整合方式以廠商提供的 Plugin/Operator 為主,例如 NVIDIA 為 K8s 提供的 GPU Operator 集成了 Fabric Manager 的啟動配置能力。排程器與 Fabric Manager 的聯合最佳化(如拓撲感知排程,避免跨 NUMA 或跨機架分配通訊密集型作業)是當前產業熱點,可再提升 5%-15% 的訓練效率(NVIDIA 公開技術演講中的案例資料)。

4. 可觀測性與運維平台(Grafana、Prometheus、DCGM) Fabric Manager 暴露的 NVLink 埠級效能計數器和故障事件被採集到監控系統,為運維團隊提供告警和回溯分析能力。NVIDIA DCGM(Data Center GPU Manager)是目前事實上的標準介面,2024 年版已能報告 NVSwitch 級別的擁塞和鏈路恢復統計。

5. 終端使用者(AI 研究員和平台工程師) 研究員無需直接感知 Fabric Manager 存在,但它的穩定性直接決定其訓練任務的“有效訓練時間”和“可重現性”。平台工程師需要深入理解其配置引數,以在部署叢集時進行初始化調優。

受益公司

本節從“產業受益方”角度,分析 Fabric Manager 技術擴散和價值鏈傳導下,各型別公司的關聯邏輯,不構成任何投資建議

1. 全棧一體化巨頭——直接受益

  • NVIDIA (NASDAQ:NVDA):nvidia-fabricmanager 是其 DGX 系統和 HGX 基板解決方案的標配軟體,構成其“軟硬一體”護城河的關鍵元件。雖然不單獨計價,但增強了 DGX/GX Cloud 的整體定價能力。公司 2024 財年(截至 2024 年 1 月 28 日)資料中心營收為 475 億美元,年增率增長 217%,其中軟體許可等營收計入該板塊,但未單獨拆分 Fabric Manager 貢獻。資料來源:NVIDIA 10-K 年報。

2. 全棧自研的雲端基礎設施廠商——內部受益,外部輸出可能性初顯

  • Microsoft Azure、Amazon AWS、Google Cloud:三者均部署了自研同類軟體以管理各自的 Maia、Trainium/Inferentia、TPU 叢集。雖不成向外部銷售,但作為成本中心和效能底座,直接改善其 AI 雲端服務的毛利率和客戶留存。Google 的 Pathways 系統、Amazon 的 Neuron SDK 網路管理模組均是具體載體。受限於商業保密,公開資料未見其規模和財務貢獻數字。

3. 追趕者——受益於技術擴散和生態相容需求

  • AMD (NASDAQ:AMD):其 ROCm 6.x 持續增強對 InfiniBand 和 RoCE 的管理能力,並通過收購 Pensando 獲得了 DPU 硬體能力。若能成功打造對標 nvidia-fabricmanager 且更開放的方案,將有助於削弱 NVIDIA 的生態鎖定。2024 年 Q2,AMD 資料中心部門營收為 28.34 億美元,年增率增長 115%,但公開資料未見其叢集管理軟體獨立營收或市場份額。資料來源:AMD 2024 Q2 季度報告。

4. 高速網路裝置供應商——底層能力提供者與潛在的擴充套件者

  • 博通 (NASDAQ:AVGO) 和 Arista Networks (NYSE:ANET):博通的交換器晶片(Tomahawk, Jericho)是開放 RoCE 網路的基石,Arista 在其 EOS 網路作業系統中提供了深度的 RDMA 管理特性。它們可能通過提供開放的 DPU/交換器級的網路管理介面,成為雲端廠商自研 Fabric Manager 的合作伙伴。博通 2023 財年 AI 相關網路營收佔比約 15%,Arista 在 2024 年將 AI 網路營收展望提升至 7.5 億美元,但兩者均不直接提供完整的 Fabric Manager 系統軟體。資料來源:Broadcom 2023 10-K,Arista 2024 Q2 Earnings Call(不構成投資建議)。

市場規模

Fabric Manager 作為一種不獨立銷售的嵌入式系統軟體,無直接可引用第三方市場定價資料。其間接市場規模可從 “被管理的 AI 網路硬體市場” 中推算邏輯,資料口徑如下:

1. AI 網路裝置支出(TAM 的相關代理指標) 專注於資料中心的 AI 網路裝置市場(包括 InfiniBand、高速乙太網路交換器、DPU、光模組)在 2023 年約為 50 億美元(估算口徑包括 NVIDIA 網路部門營收的約一半及其他廠商,綜合數家行業分析報告估算)。預計到 2028 年該市場將增長至 200-250 億美元。Fabric Manager 作為使該網路“可運作”的必要軟體,其價值按硬體附加率折算在 10%-20% 之間(產業經驗值,無第三方公開發布),即對應 2028 年約 20-50 億美元的“等效價值空間”。

2. 直接可定址市場(SAM) 如果未來軟體從硬體中獨立計費(如以“AI 網路作業系統”許可形式銷售給非 NVIDIA 的硬體整合商),根據 Top500 超算和主要雲端廠商萬卡以上叢集的部署計劃(截至 2024 年 8 月,公開報道在建的萬卡以上叢集超過 30 座),潛在年許可費或訂閱營收規模可能在 2027-2028 年達到 5-10 億美元。該預測前提是出現開放的第三方硬體平台標準化管理介面,且產業生態出現“軟硬解耦”的共識,目前尚未發生。

3. 區域市場與驅動因素 北美(以超大規模雲端廠商和 AI 實驗室為核心)佔全球部署的 60% 以上,中國(華為昇騰生態、百度崑崙等自研叢集)受供應鏈限制,更多采用自研方案,獨立商業市場難以測算。驅動力來自:AI 模型引數量每 18 個月翻 10 倍(根據 Epoch AI 公開資料集推演)、大規模算力中心建設規劃(2024-2027 年全球每年新增 AI 資料中心 IT 裝置支出約 2000-3000 億美元,McKinsey 2024 報告預測)。

重要宣告:以上數字為基於產業邏輯的推演估算,不構成投資建議或準確的財務預測。公開資料中未見權威第三方對“Fabric Manager 獨立市場規模”的正式研究報告。

玩家對比

以下對比面向產業內可實現同類功能的廠商和技術路線,基於公開技術文件和架構白皮書整理,不作為競爭排名或投資推薦

維度NVIDIAAMD雲端廠商自研 (AWS TPU/Trainium)開放 HPC 方案
載體nvidia-fabricmanager 系統服務ROCm 韌體/驅動組合內部閉源控制平面Slurm + IB 管理器
核心硬體繫結GV100+ GPU、NVSwitch、CX-6/7Instinct GPU、Infinity Fabric自研加速器,自研互聯InfiniBand/高效能乙太網路
整合深度至 NCCL API 級別,可程式設計硬體路由通過 RCCL 整合,功能成熟度待提升完全定製,與自研編譯器聯動弱,僅基於節點拓撲
最佳化目標極致頻寬利用率(95%+)效能追趕,生態相容適配自研晶片特性通用工作負載
開放性封閉,必須全套 NVIDIA相對開放,但生態仍弱完全封閉開放標準,但最佳化不足
萬卡級故障恢復自動、透明,秒級重路由公開資料未見詳細能力描述具備,內部宣傳高可用依賴管理員指令碼和作業重試
市場份額估計(2024)AI 訓練叢集互聯管理方案中佔比超 80%(根據 NVIDIA 資料中心 GPU 出貨量推斷,無獨立第三方報告)不足 5%,主要在高效能運算領域在各自雲端服務內部 100%,對外不銷售在科研 HPC 和千卡以下叢集保留

注意:雲端廠商自研方案雖不對市場份額產生直接影響,但它們通過技術替代削弱了 NVIDIA 的生態溢價,是“隱形參與者”。博通、Marvell 等晶片商是上述所有玩家的上游供應商,不直接參與該軟體層的競爭。

風險

1. 技術鎖定風險(使用者側) 採用 NVIDIA 的 Fabric Manager 即意味著與 CUDA、NCCL、NVSwitch 生態深度繫結。未來若供應鏈中斷或價效比發生變化,遷移到其他平台將涉及重寫大量底層網路配置程式碼和通訊庫適配,時間與成本難以估量。對雲端廠商而言,此風險是推動自研的主要原因之一。

2. 供應鏈單點故障風險(產業側) 當前頂級 GPU-to-Switch 互聯的硬體方案幾乎均由 NVIDIA 獨家提供。一旦其 NVSwitch 或 Fabric Manager 軟體出現零日漏洞或重大架構缺陷,全球多座大型 AI 叢集可能同時面臨停機。2024 年業界已觀察到部分 CSP 為規避此風險而在購買策略上進行“多源化”嘗試,公開資料未見具體中斷案例。

3. 競爭替代風險 AMD 的 ROCm 和 Intel 的 oneAPI 持續進步,如果它們能提供穩定、高效能且無軟體許可顧慮的等效功能模組,且在驅動層做到與開源通訊庫(如 RCCL)的同樣深度整合,NVIDIA 軟體層的絕對優勢可能被侵蝕。此外,雲端廠商內部方案大規模驗證後也可能通過 Open Compute Project 等渠道開放部分規範,形成產業事實標準,重構競爭格局。

4. 標準化缺失風險 Fabric Manager 不存在 ISO、IEEE 或 OCP 等標準化組織制定的公開規範。這減緩了軟硬體解耦程序,導致使用者難以混合採購不同廠商的計算和互聯裝置。長期來看,若持續無開放標準,AI 基礎設施可能形成若干互不相容的“孤島”,增加全產業成本,並可能引發反壟斷審查關切。

5. 技術複雜性與人才稀缺 部署和運維 Fabric Manager 需要同時精通 GPU 驅動、網路交換協議、集合通訊演算法和分散式系統排障的複合型工程師。目前全球具備該能力的經驗者供給嚴重不足,可能導致部分規模擴張中的企業因人才瓶頸而無法按期啟用萬卡叢集的全部能力。這一風險在 2024 年多個行業招聘報告中有所提及。

誤讀糾偏

誤讀一:“Fabric Manager 就是叢集排程器。” 糾偏:這是最常見的概念混淆。排程器(如 Slurm、Kubernetes)負責回答“哪個作業該在哪些節點上執行”;Fabric Manager 負責回答“這些節點間的通訊如何不走彎路、不堵車、不拋錨”。兩者是垂直分工,排程器在更高抽象層,Fabric Manager 緊貼物理互聯層。一臺伺服器若不安裝 Fabric Manager,GPU 間只能以極低效的 PCIe 對等通訊,排程器對此無能為力。

誤讀二:“Fabric Manager 的作用在單機或幾十卡規模下就能體現。” 糾偏:它的核心價值是“規模效應”。在 8 卡或 16 卡的 DGX 單機內,NVSwitch 硬體已預設完成路徑固化,管理複雜度極低。Fabric Manager 的指令級最佳化、故障域隔離和動態重路由真正發揮作用是跨 32/64 個節點、超過 256 張 GPU 之後。規模越大,它帶來的效率提升越顯著,是明顯的“遞增收益”系統元件。

誤讀三:“只要用了好網絡卡和好交換器,Fabric Manager 的功能就自然實現了。” 糾偏:硬體提供“能力”,Fabric Manager 提供“策略”。高速鏈路只是一條很寬的公路,Fabric Manager 是交通規則、交警和訊號燈系統。沒有它的集中式路徑控制和優先順序區分,多作業混跑的叢集中會頻繁出現網路擁塞樹和頻寬不公平使用,導致訓練效率極度不穩定,這與網路裝置的價格高低沒有直接關係。

誤讀四:“Fabric Manager 只屬於 NVIDIA,其他家沒有。” 糾偏:準確地說,nvidia-fabricmanager 是 NVIDIA 對該功能的商命稱,但該功能類別(GPU 互聯管理)是所有大規模 AI 叢集必須實現的能力。AMD 有同類實現,Google TPU 的 ICI 管理器、AWS Trainium 的 NeuronLink 管理器都是功能等價物。否定這一點,等於預設所有非 NVIDIA 的萬卡叢集都無法有效執行,這顯然與產業事實不符。

最新事件

以下選擇 2024 年至 2025 年初與該主題直接相關的產業公開事件,來源以公司官方部落格、財報電話會和標準會議為主。

1. NVIDIA 釋出 Blackwell 平台與 NVLink 5.0(2024 年 3 月 GTC) 新架構引入 8 顆 GPU 連線同一 NVSwitch 的拓撲更新,並支援 NVLink 域擴充套件到 576 張 GPU。相對應的 nvidia-fabricmanager 必須更新以管理更復雜的跨機箱 NVLink 域和具更高頻寬(雙向 3.6TB/s)的鏈路故障檢測。公司確認現有 DGX SuperPOD 的客戶將獲得軟體升級支援 Blackwell 部署。

2. 博通宣佈推出 Jericho3-AI 交換晶片系列(2023 年釋出,2024 年規模送樣) 該晶片專門為 AI 叢集的 RoCE 網路設計,支援硬體級負載均衡和擁塞控制。此類可程式設計交換晶片為雲端廠商自研 Fabric Manager 提供了更強大的底層硬體抽象介面。Arista 隨後宣佈在其 EOS 中新增針對 Jericho3-AI 的深度管理特性,這是 Fabric Management 功能向開放網路棧擴散的訊號。來源:Broadcom 2023 年 4 月新聞稿,Arista 2024 年 3 月技術部落格。

3. 微軟 Azure 公開 Maia 100 AI 加速器架構細節(2023 年 11 月,2024 年逐步揭露) Maia 100 內建了稱為“tensor fabric”的直接網際網路絡,且微軟自研了對應的管理控制面板。此事件表明頭部雲端廠商在 Fabric Manager 層級的自研已進入第二代以上,其技術路線完全繞過 InfiniBand 和 NVSwitch。來源:Microsoft Azure Blog。

4. 超級計算大會 SC24 強調“AI 網路韌性”(2024 年 11 月) SC24 上將“Resilient AI Networking”列為專題,多篇學術界和企業論文討論了故障率隨 GPU 規模指數上升後的軟體應對策略,其中 Fabric Manager 層級的健康監控與快速恢復演算法是核心議題。部分論文提出了基於強化學習的預測性重路由方案。此類前沿研究可能在未來 2-3 年內進入商業產品。來源:SC24 會議日程與論文列表。

5. 中國國產 AI 叢集擴大部署並引入自研管理軟體(2024 年產業動態) 據中國媒體和公開招標資訊(2024 年 H1),多個智算中心在昇騰 910B 和 910C 叢集上部署了與華為 CANN 平台對應的網路管理元件,旨在實現數千卡國產晶片的互聯效率最佳化。公開資料未見詳細效能基準測試或故障恢復指標,但標定了該功能類別的非 NVIDIA 路線在持續推進。

追蹤指標

如需持續追蹤 Fabric Manager 相關技術的產業進展與影響,建議關注以下公開可獲取的資料和訊號源:

1. NVIDIA 季度財報(資料中心部門、網路營收)與 GTC 大會新架構釋出 直接觀察 Blackwell/Rubin 等新一代平台對 NVLink 域的擴充套件計劃,以及 nvidia-fabricmanager 的功能變更公告。來源:NVIDIA 投資者關係頁,GTC 公開演講錄影。

2. AMD ROCm 與 Intel oneAPI 的版本釋出說明 關注其“Cluster”、“Fabric”、“Collective Communication”模組的功能升級描述。若出現對 4096+ 路 GPU 叢集的官方可支援性宣告,即是產業競爭格局的關鍵訊號。來源:GitHub 倉庫、AMD 社群部落格。

3. 超大規模雲端廠商自研晶片網路架構白皮書 AWS re:Invent、Google I/O、Microsoft Build 等年度會議中,與 Trainium、TPU、Maia 網路架構相關的分會演講。關注點:是否揭露了互聯域規模上限、故障恢復時間 SLO 等具體指標。來源:各雲端廠商活動官網、YouTube 存檔。

4. 光模組和交換晶片廠商的 AI 相關營收展望 通過中際旭創、Coherent、博通、Marvell 等公司的財報電話會,瞭解 AI 網路埠的出貨速率升級曲線(如 800G 到 1.6T 的滲透率斜率),間接對映 Fabric Manager 需要管理的網路複雜度的增長速度。來源:各公司投資者關係頁。

5. 學術會議論文(SIGCOMM、OSDI、NSDI、MLSys) 特別是“AI Networking”、“ML for Systems”相關領域的論文,往往包含來自 Google、Meta、Microsoft 等一線使用者的叢集管理真實資料(如故障率、恢復時間、拓撲壓力測試)。這是公開可獲取的、最接近生產實際的技術指標來源。來源:ACM/IEEE 數字圖書館,arXiv.org。

6. 行業分析機構關於“AI 網路”的市場報告 如 LightCounting、Dell’Oro 和 650 Group 定期釋出的 AI Network 裝置支出預測報告,可以監測 Fabric Manager 底層硬體市場的走向。注意所有市場規模類資料需明確引用年份、貨幣口徑和預測假設。

信源

本文所引用技術原理、市場邏輯及公司動態,均基於截至 2025 年初及之前公開發布的資料整理,核心來源型別如下:

  • 公司官方資訊:NVIDIA、AMD、Intel、Broadcom、Arista、Microsoft Azure、Amazon AWS、Google Cloud 等公司的技術白皮書、部落格、GitHub 倉庫、10-K/10-Q 財報檔案及公開活動演講。
  • 行業組織與會議:GTC、SC24、OSDI、SOSP 的公開論文和會議記錄;OCP 公開規範文件。
  • 第三方分析與資料:LightCounting、Dell’Oro、650 Group 等研究機構的市場報告(不構成購買建議);McKinsey 資料中心的投資預測報告。
  • 學術與科學資料:arXiv.org 公開論文;Epoch AI 的公開資料集。
  • 重要宣告:所有關於市場規模、公司市場份額的資料凡未直接援引至公開文件的,均已註明為“邏輯推斷”或“行業估算”,不作為精確的財務或投資決策依據。本文不構成任何買賣、持有證券的建議,並進行預測性推演。具體技術引數和商業部署請以各公司官方最新公佈為準。
source: 公開揭露與公開資料整理 本頁僅用於產業鏈學習、資訊檢索和研究輔助;不構成投資建議,不預測漲跌,不提供買賣、部位或目標價建議。
完整概念頁 複盤 13 節結構 公司投研頁 沿產業鏈找到受益公司 投資課 把概念轉成可跟蹤模型