芯片层 开放阅读

规格定义

Specification

概念 ID
specification
更新时间
2026-05-29
来源数量
待补

规格定义

3 秒看懂

“规格定义”(Specification)是半导体与 AI 计算系统中对芯片、封装、模组、系统与软件接口的白纸黑字的契约——它规定了一颗芯片在何种频率、电压、温度边界下必须实现哪些功能、达到什么性能/功耗、遵循何种协议。没有它,上下游无法协同设计,供应链无法量产,客户无法集成,产品定义就是一句空话。

对于金融从业者,规格定义可以理解为一份具备物理约束的“商业合同”:一旦发布 datasheet,意味着该产品的成本结构、目标客群、产能需求和预计生命周期毛利率均已基本锁定。

3 分钟产业解释

在 AI 产业链中,规格定义贯穿架构设计→物理设计→封装→板级集成→服务器→数据中心上线全过程。它既包括可测试的硬性指标(算力 TFLOPS、能效 TFLOPS/W、显存容量/带宽、互联速率、误码率、PCIe/CXL 版本与通道数),也包括时序余量、热阻、电源噪声容限、高带宽内存的信令抖动眼图等物理约束。规格定义由架构师、产品经理、硬件工程与验证团队共同制定,通常以数据手册(Data Sheet)、工程规格书(E-spec)和产品需求文档(PRD)等形式固化。

对投资者而言,规格定义是预判技术路线和控制成本的重要工具。以英伟达 H100(2022 年发布,采用 4nm 定制制程)为例,一颗 AI 加速器若在规格阶段就确认采用 CoWoS 先进封装、HBM3 内存、PCIe Gen5 互联,则意味着其制造成本(据市场研究机构 TechInsights 2023 年拆解估算,单卡物料成本约 3,320 美元)、良率风险(初期 CoWoS 封装良率约 80%-85%,后随产能爬坡提升至 90% 以上,来源:台湾工商时报 2023 年 8 月报道引述供应链消息)、量产时间窗基本锁定。这也是为什么产业跟踪极度重视“流片规格”、“最终 datasheet 参数披露”、“互联白皮书”等事件节点——规格一旦落定,后续能做的优化空间就很小了。

技术原理

规格定义本质上是量化约束下多目标优化的解空间边界。工程师在功耗墙、面积墙、热墙和成本约束之间寻找最优产品定位。

关键参数之间的制约关系(典型,以先进制程 AI 加速器为例):

  • 时钟频率 ↑ → 时序裕量 ↓:频率每提升 10%,建立保持时间预算缩减约 10%,通常需要电压上浮 3%-5% 以维持良率。功耗随之呈超线性增长(动态功耗 P∝f·V²,频率提升与电压同步上调时,实际功耗增长率接近频率的三次方)。以 GPU 典型 TDP 从 300W 升至 700W(H100 SXM 版为 700W,A100 为 400W,来源:NVIDIA 官方 datasheet,2020/2022 版本)的演进为例,散热方案被迫从风冷转向液冷。

  • 芯片面积 ↑ → 单晶粒良率指数下降(缺陷密度恒定时,良率≈e^(-缺陷密度×面积))。若采用小芯片(chiplet)拆分——如 AMD MI300X(2023 年 12 月发布,来源:AMD 官方新闻稿)用 12 颗 5nm 计算芯粒和 4 颗 6nm I/O 芯粒集成,则需额外 D2D 接口(如 Infinity Fabric),消耗约 0.3-0.5 pJ/bit 的接口功耗和边缘布线资源,同时增加封装基板层数要求(据公开资料,至少需 14 层以上 ABF 基板)。

  • HBM 堆叠高度、中介层面积与 DRAM 堆叠层数三者受制于晶圆翘曲控制保证规则。 12 层 HBM3e 封装厚度已接近 800μm(据三星电子 2023 年技术论文),超出规则将导致回流焊时焊球冷焊失效。因此,规格中的 HBM 容量不能无限堆叠——目前已知上限为 12-16 层(2024 年 SK 海力士量产 16 层 HBM3E,来源:公司 2024 年 Q1 财报电话会)。

设计空间的表达(概念性 ASCII 图):

       性能 P (TFLOPS)
        ^
        |         × TDP 墙(700W 液冷边界)
        |    ·  可行域  ·
        |   ·   (产品定位点) ·
        |  ·          ·
        | ·   频率-电压对  ·
        +------------------------> 功耗 W
         封装成本边界(中介层面积上限 ~3.5x reticle)

规格工程师在整个可行域中选取产品定位点。产品的最终 datasheet 相当于公布了这个收敛坐标,并附带±10%-15% 的工艺角裕量。

关键参数

算力类

  • INT8/FP8 推理峰值:H100 SXM 为 3,958 TFLOPS(稀疏),来源:NVIDIA H100 规格表 2022;MI300X 为 2,615 TFLOPS(密集 FP8),来源:AMD MI300X datasheet 2024
  • BF16/FP16 训练峰值:H100 SXM 约 989 TFLOPS(密集),B200 约 2,250 TFLOPS(密集),来源:NVIDIA GTC 2024 主题演讲
  • FP64 双精度(主要用于部分科学计算,多数 AI 训练强调 BF16/FP8)

内存/显存类

  • 容量:H100 80GB HBM3,H200 141GB HBM3e,MI300X 192GB HBM3,B200 192GB HBM3e(来源:各厂商官方 datasheet,截至 2024 年 6 月)
  • 带宽:H100 3.35TB/s,MI300X 5.3TB/s,B200 8TB/s(同上)
  • 内存类型对应带宽范围:HBM2e ~460GB/s/stack,HBM3 ~820GB/s/stack,HBM3e ~1.2TB/s/stack(来源:JEDEC 标准,SK 海力士/三星产品手册)

互联类

  • 片间互联:NVLink 4.0 双向 900GB/s/GPU(H100),NVLink 5.0 双向 1.8TB/s/GPU(B200,NVIDIA GTC 2024);AMD Infinity Fabric 第四代 896GB/s(MI300X,AMD 2024)
  • PCIe 版本与通道数:Gen5 x16 单向 64GB/s,Gen6 x16 单向 128GB/s(PCI-SIG 规范)
  • 跨节点 RDMA:InfiniBand NDR400 单端口 400Gb/s,Spectrum-X 以太网 400GbE(NVIDIA 网络部门公开信息 2024)

能效类

  • TDP:H100 SXM 700W,MI300X 750W,B200 1,000W(均来自官方 datasheet 2022-2024)
  • TFLOPS/W 典型值:H100 BF16 约 1.4 TFLOPS/W(989 TFLOPS÷700W),MI300X BF16 约 1.7 TFLOPS/W(1,307 TFLOPS÷750W),来源:公开官方数据计算
  • 液冷工况下持续功耗:可超出风冷 TDP 约 15%-25%(据 Vertiv 2023 年数据中心散热白皮书中的行业经验值)

容量边界

  • 单 GPU 最大支持内存容量(H200 141GB,B200 192GB,截至 2024 年 6 月公开资料)
  • NVSwitch 拓扑下最大连接 GPU 数:H100 可达 256 GPU(DGX GH200 规格,NVIDIA 2023 年 Computex),B200 可达 576 GPU(GB200 NVL72 机架级设计,来源:NVIDIA GTC 2024)

技术路线

算力供给路线对比

维度NVIDIA Hopper/BlackwellAMD CDNA3/MI300 系列定制 ASIC(Google TPU v5p/Amazon Trainium2)
核心计算定位通用 GPU 算力,覆盖训练+推理GPU 算力对标 NVIDIA,强调内存容量与带宽面向内部或特定客户,针对 Tensor 运算深度优化
算力指标B200 BF16 密集 2,250 TFLOPS(NVIDIA 2024)MI300X BF16 密集 1,307 TFLOPS(AMD 2024)TPU v5p 单芯片 BF16 公开资料未见(Google 仅披露 pod 级指标 2023)
显存方案HBM3e,B200 192GB,带宽 8TB/sHBM3,192GB,带宽 5.3TB/sTPU v5p 采用定制 HBM 方案,容量/带宽未公开
互联策略NVLink 5.0 + InfiniBand + Spectrum-X,闭环生态Infinity Fabric + 标准以太网,开放生态定制 ICI(芯片间互联),与 Google 内部 Jupiter 网络耦合
封装路线CoWoS-L(Blackwell 开始引入),TSMC 独家产能绑定CoWoS 及 FO-EB,分散供链(TSMC+三星潜在)TSMC CoWoS 为主,公开细节有限
功耗策略TDP 1,000W,主推液冷(NVIDIA MGX 参考架构)TDP 750W,支持液冷与系统耦合,单芯片 TDP 不单独披露
开放程度详细 datasheet 公开,CUDA 生态封闭主要 datasheet 公开,ROCm 生态开源完全内部,外部无正式 datasheet

来源:各公司官方发布及 datasheet,时间截至 2024 年 6 月。定制 ASIC 列信息多摘自云厂商技术博客及第三方分析师推测,以厂商公布为准。

工艺节点演进对规格的影响(2024-2026 年展望)

节点代表产品(已发布/预期)典型算力增益 vs 前代SRAM 缩放成本/晶体管趋势
TSMC N4(5nm 族)H100, MI300X基线0.9x 面积缩放持平略升
TSMC N3E(3nm)公开资料未见量产 AI 大芯片逻辑密度 ~1.6x,频率+5%-10%缩放放缓,SRAM 面积仅 ~0.8x每晶体管成本上升 ~10%-15%(据 IBS 2023 报告)
TSMC N2(2nm,预计 2025H2)尚无公开产品逻辑密度 ~1.4x vs N3E,能效 +25%-30%(TSMC 技术论坛 2024)进一步停滞预计继续攀升,公开研究机构估算不明
Intel 18A(预计 2025)尚无公开量产 AI 芯片性能/Watt 声称+15% vs 3nm 级(Intel 代工日 2024)公开数据不充分公开资料未见第三方便利性估算

注:2024 年以后的数据多为晶圆厂/研究机构预告或推测,具体芯片产品需待流片及正式发布。

上游

晶圆厂

  • 台积电(TSMC,2330.TW):2024-2025 年为全球约 90% 的 AI 先进制程大芯片代工(N4/N3E/N2 节点),同时独家供应 CoWoS-S/L/R 先进封装产能(据 Counterpoint Research 2024Q1 报告)。2024 年 CoWoS 产能预计较 2023 年翻倍至 ~3-4 万片等效晶圆/月(TSMC 2023Q4 法说会),规划 2025 年达 5.5-6 万片。产能直接约束 H100/B200/MI300 等高端 AI 芯片规格能否按时落地。
  • 三星电子(Samsung Electronics):提供 4nm 级以下代工及 HBM3/HBM3e 供应,先进封装布局 I-Cube/H-Cube,欲分食 CoWoS 份额(据三星 Foundry Forum 2023),2024 年实际 AI 大芯片订单据公开信息主要来自内部及少量外部客户。
  • 英特尔代工服务(Intel Foundry):2024 年推进 18A 节点,目标 2025 年量产,AI 大芯片客户公开信息未披露。

HBM 存储器供应商

  • SK 海力士(SK hynix):2024 年 HBM3/HBM3e 市占率估计约 50%-55%(据 TrendForce 2024Q1 存储产业报告),独家供应 NVIDIA H200/B200 的 HBM3e 堆叠(2024 年)。HBM3e 12Hi(12 层)于 2024Q1 出货,16Hi 尚在验证。
  • 三星电子(Samsung Electronics):HBM3e 12Hi 于 2023 年发布,2024 年争取 NVIDIA 验证通过(据韩国媒体 ZDNet Korea 2024 年 5 月报道)。HBM 产能约占行业 40%(TrendForce 2024Q1)。
  • 美光(Micron):HBM3e 2024 年提供样品,产能起步较晚(据美光 2024Q2 财报电话会,占比未披露)。行业产能集中于韩系厂商。

EDA/IP 供应商

  • 新思科技(Synopsys)与楷登电子(Cadence):提供标准单元库特性化数据(时序、功耗模型)、3D-IC 设计工具、UCIe/D2D 接口 IP(据两家公司 2023-2024 年产品发布)。HBM3/HBM3e 控制器及 PHY IP 被几乎所有 AI 芯片采用,授权费用构成芯片 NRE 成本。
  • Arm:提供 Neoverse 服务器 CPU 核心 IP(被 NVIDIA Grace、AWS Graviton 等采用),CPU 规格(频率、缓存大小、功耗)直接影响 AI 芯片中控制与调度单元的算力裕量。

封装与基板

  • ABF 基板:应用于大型 FCBGA 封装。AI 芯片面积增大驱动基板面积扩大,单颗 H100 封装基板约 55mm×60mm(据拆解报告),产能受困于日本 Ibiden、Shinko 等少数供应商的高端产能(据 Prismark 2023 年封装基板报告,高端 ABF 产能集中于日系三强)。
  • CoWoS 中介层:TSMC 自供,2024 年尚占独家产能。中介层硅片面积上限决定最大封装尺寸——目前已知上限约 3.5 倍 reticle size(约 2,800mm²,来源:TSMC 先进封装技术研讨会 2023)。

下游

系统集成商(OEM/ODM)

  • 依据芯片规格设计服务器主板、散热模块、电源。规格书中的 TDP、外形尺寸(SXM/PCIe 双态)、连接器定义直接决定系统 BOM(物料清单)。
  • 关键厂商:富士康(Foxconn)、纬创(Wistron)、广达(Quanta)、英业达(Inventec)、超微(Supermicro)。
  • 据 DIGITIMES Research(2024Q1),2024 年全球 AI 服务器出货约 16-18 万台,其中纬创与富士康合计拿到 NVIDIA 约 60%-70% GPU 基板与模组代工订单(基于供应链调研估算)。

超大规模数据中心(Hyperscaler)/ 云厂商

  • 将芯片规格转化为 SLA(服务级别协议)。例如,Google TPU v5p pod(8,960 芯片)有效训练吞吐量需满足 BF16 算力利用率 ≥45%(Google Research 2023 年论文披露集群级效率数据),且线性扩展系数 >0.90(896→8960 芯片步长)。
  • 主要客户:微软 Azure、AWS、Google Cloud、Oracle Cloud Infrastructure、Meta 等。2024 年各家 AI 加速器资本开支预估:微软 + Azure 约 500 亿美元(据 Bloomberg 2024Q1 估算),Meta 约 300-370 亿美元(Meta 2024Q1 财报指引),AWS 未单独披露 AI 硬件开支(其母公司 Amazon 2024 年总 CapEx 指引约 600 亿美元,据 Q1 财报,口径含物流等非 AI 开支)。

软件栈与框架

  • PyTorch/XLA、Triton、TensorRT 等依赖芯片指令集规格、内存模型来生成高效代码。
  • CUDA 生态是 NVIDIA 的规格“软锁定”:编译器(nvcc)和库(cuDNN/cuBLAS)基于规格做了深度优化,使第三方芯片即使原始算力规格接近也难以在真实任务中匹敌 MFU(模型 FLOPS 利用率)。
  • AMD ROCm 2024 年迭代至 6.0 版本(AMD 官方仓库),兼容性逐步提升,但社区生态份额仍较小(据爬取 GitHub 公开数据,ROCm 相关星标数约为 CUDA 的 1/50)。

市场规模

AI 加速器芯片市场

  • 据 Gartner 2024 年 5 月报告《Worldwide AI Semiconductor Revenue》:2023 年全球 AI 加速器芯片市场(含 GPU、ASIC、FPGA)收入约 536 亿美元,同比增长 50%+;预计 2024 年达 710 亿美元,同比增长约 32%(口径:出货量×ASP 折算,含 NVIDIA、AMD、Intel、Google TPU 等自产自用)。
  • NVIDIA 2023 年数据中心 GPU 收入(含 H100/A100 等)约为 362 亿美元(据 NVIDIA FY2024 年报),占上述市场比例约 67%。
  • 定制 ASIC(TPU/Trainium/Inferentia 等)2023 年市场规模约为 60-70 亿美元(据 The Information 2023 年引用云厂商内部估算,口径为芯片成本而非外部收入)。

HBM 市场

  • 据 TrendForce 2024 年 3 月报告:2023 年全球 HBM 市场规模约 45 亿美元(出货量口径),预计 2024 年达约 140 亿美元,年增约 211%。HBM3/HBM3e 占比预计从 2023 年的 ~60% 升至 2024 年的 90%+。
  • 2025 年 HBM 市场(Forecast):据 Yole Group 2024Q2 推算,约 230-260 亿美元,受 B200、MI300X 迭代产品及更多定制 ASIC 需求拉动。

先进封装(CoWoS 等)

  • 据 Morgan Stanley 2024 年 1 月研报引用 TSMC 数据口径:2023 年 CoWoS 营收约占 TSMC 总营收的 6%(~40 亿美元,口径:等效晶圆出货量×单位售价),预计 2024 年增至约 85 亿美元(产能翻倍+附加值提升),2025 年挑战 130-150 亿美元。

AI 服务器市场

  • 据 IDC 2024 年 5 月《Worldwide Quarterly Server Tracker》:2023 年全球 AI 服务器出货约 14 万台,对应营收约 390 亿美元;预计 2024 年 AI 服务器营收达 550 亿美元,同比增长 ~41%(口径:含 CPU+GPU+加速卡+存储+网络的整机价)。
  • 规格升级驱动单价上涨:NVIDIA DGX H100 整机定价约 30 万美元(2023 年),GB200 NVL72 机架据公开报道单 rack 可达 150-200 万美元(据 SemiAnalysis 2024 年 3 月付费分析),显示规格提升对 ASP 的杠杆效应。

玩家对比

NVIDIA vs AMD:2024 规格焦点

规格维度NVIDIA B200 (2024 发布)AMD MI300X (2023Q4 发货)
制程4nm 定制(TSMC 4NP)5nm/6nm (计算/IO chiplet)
BF16 密集 TFLOPS约 2,250约 1,307
内存/带宽192GB HBM3e / 8TB/s192GB HBM3 / 5.3TB/s
TDP1,000W750W
片间互联NVLink 5.0 双向 1.8TB/sInfinity Fabric 双向 896GB/s
发售窗口预计 2024H2(NVIDIA 官方指引)2023Q4 发货,2024Q2 放量
生态护城河CUDA,训练领域市占率 >90%(据 The Information 2024)ROCm,部分推理场景可用
估值的市场关注点迭代节奏(年度架构)能否从推理侧突破 CUDA 锁定

来源:各公司 2023-2024 年 GTC/AMD Advancing AI 活动公开资料,参数量化口径为厂商标准。

定制 ASIC 阵营(Google TPU v5p/AWS Trainium2/微软 Maia)

维度Google TPU v5pAWS Trainium2微软 Azure Maia 100
公布时间2023 年 12 月2023 re:Invent 发布2023 Ignite 发布
公开规格单芯片不披露,pod 级 BF16 算力 ~4,590 TFLOPS(8,960 芯片)BF16 ~830 TFLOPS 每芯片(AWS 官方 2023)Maia 100 规格公开资料未见详细数字
内存类型定制 HBM(代际未披露)HBM3(容量未披露,据 AWS 技术博客 2024)HBM(容量未披露,微软 Ignite 2023 简要提及)
互联方案ICI 专属,与 Jupiter 光交换配合NeuronLink v2 768GB/s 双向(AWS 2023)Ethernet 标准接口(微软 2023)
对外销售仅云服务仅云服务仅云服务,且目前仅限部分 Azure 实例
资本关切降低对 NVIDIA 的采购依赖,云服务 TCO 优势同上,但因 Trainium 起步较晚份额小微软仍是 NVIDIA GPU 第一大买家(据估算),Maia 部署量级尚未披露

注:定制芯片数据均来自对应云厂商官方技术博客及大会发布,部分详细规格(如晶体管数、die size)不公开。

风险

1. 规格落地不确定性风险

  • 从“目标规格”到“保证规格”存在向下修正的可能性。历史上 Intel Sapphire Rapids 服务器 CPU 经历多次延期/规格下调(据 AnandTech 跟踪报道 2022-2023),影响系统厂和终端客户规划。
  • AI 芯片领域公开已知案例:NVIDIA 早期 H100 规格有 800W 版本传闻,最终 SXM 为 700W(据 SemiAnalysis 2022 年 speculation),虽对 NVIDIA 产品竞争力影响有限,但显示规格在正式发布前存在调整空间;规模更大的调整在定制 ASIC 领域也可能发生,如 AWS Trainium1 实际出货规格与早期预览有细节调整(据 Jeff Barr AWS 博客 2023)。

2. 先进封装产能瓶颈风险

  • CoWoS 产能直接影响 AI 大芯片的量产节奏。据 TSMC 法说会(2023Q3-Q4),2023 年 CoWoS 产能缺口一度达 10%-20%(终端需求 vs 可用产能),2024 年虽有大幅扩产规划但新产线达产需要时间。若 2025 年 AI 需求再超预期,部分型号或面临 3-6 个月交付延迟,影响对应云厂商和 OEM 的季度业绩。
  • 中介层硅片大尺寸化面临良率挑战:中介层面积越大缺陷概率越高(良率≈e^(-D0×面积)),TSMC 3.5x reticle 大尺寸中介层据行业信息初期良率可能在 70%-80%(公开数字未见,基于 C. C. Lee 等人 2022 IEEE 论文中一般性模型推算)。

3. 内存规格匹配与 HBM 供应集中风险

  • HBM 供给高度依赖 SK 海力士/三星,产能扩张需时 12-18 个月(据存储产业资本开支周期历史规律,TrendForce 2024)。一旦存储器厂调整 HBM 产能分配(如优先供应手机/服务器 DRAM 以平衡盈利),AI 芯片的 HBM 规格落地将受限。
  • HBM 堆叠层数从 8 到 12 再到 16 层的技术难度呈级数上升,晶圆减薄、TSV 对齐精度、翘曲控制均逼近物理极限。若 16Hi HBM4 量产技术突破滞后(据 JEDEC 路线图预告 2026 年前后),高端 GPU 的等效显存带宽升级可能延迟,影响算力迭代。

4. 规格发布节奏带来投资节奏错判风险

  • 半导体产品从 specs 发布到批量供货通常有 3-6 个月时间差(基于 NVIDIA/AMD 过往几代 GPU 发布历史观察),这期间需求环境、竞品、定价可能变化。
  • 高规格产品若在发布后一年内缺乏足够系统配套(如 1,000W 液冷方案部署门槛、PCIe Gen6 交换机未就绪),ASP 和毛利率可能受制于出货结构下移。

5. 地缘政治与出口管制带来的规格合规风险

  • 美国商务部 BIS 2023 年 10 月对先进计算芯片出口的管制指令,以 TPP(总处理性能)和 PD(性能密度)为规格门槛设限。若未来管制标准进一步下调或加征 HBM 管控(据 Reuters 2024 年 4 月报道讨论可能),中国区需求收缩将反向影响高规格芯片的全球定价与产能分配。目前 NVIDIA H100/H200 等多款高规格芯片对华出口受限(据 NVIDIA 2024 年 10-Q 文件中的风险披露)。

误读纠偏

误读 1:规格书上的 TFLOPS 就是实测性能。 TFLOPS 是“峰值理论算力”,实际有效 TFLOPS 取决于计算密度(FLOPS/Byte)、编译器优化和批量大小。对 GEMM 密集型操作,利用率(MFU)达 70%-80% 已属优秀(据 NVIDIA 内部优化指南及公开框架 benchmark 讨论);对带宽受限操作(如 attention 算子),MFU 可能仅 20%-30%。对比两颗不同芯片时,切勿将峰值 TFLOPS 直接等同于实际跑分。正确的对比是等精度下等框架 benchmark(如 MLPerf 公布的实测结果,截至 2024 年 6 月最新版本为 MLPerf v4.0)。

误读 2:先进制程必然降低成本,规格可以等比例放大。 制程微缩(如 N3→N2)提供逻辑密度增益,但每亿晶体管的成本非降反升。据 IBS 2023 年报告,3nm 晶圆价格较 5nm 上涨约 35%-40%,且 SRAM 微缩几乎停滞(N3 SRAM 面积仅较 N5 缩小约 20%,TSMC 2023 年技术研讨会披露),缓存容量不能无代价增加。规格中 L2/L3 缓存的选择是成本收益权衡,而非“越大约好”。

误读 3:每代 GPU 算力翻倍是常态,“摩尔定律式”稳定增长。 H100 对比 A100 的 BF16 算力提升约 3.2 倍(989 vs 312 TFLOPS,NVIDIA datasheets),但这得益于制程、架构、HBM 带宽和功耗上限“四重解锁”。B200 对比 H100 的提升约为 2.3 倍——单靠制程已不足以支撑同样的代际翻倍率。未来代际可能趋于 1.5-2x 增幅,并更多依赖封装与系统级创新(多芯片互联带宽、光互联探索等)。

误读 4:TDP 高就是功耗大、“不经济”。 TDP 是热设计包络,不等于实际运行功耗。数据中心 GPU 的实际功耗取决于负载类型和功率管理策略。更重要的是,单瓦性能(TFLOPS/W)往往随 TDP 升高而改善(因为在固定漏电功耗上新增的性能更高效)。例如,H100 SXM 700W 的 TFLOPS/W 较同代 350W PCIe 版本更高(SXM: 1.4 vs PCIe: 约 1.0-1.1,据 NVIDIA 数据手册数值推算)。正确视角是把 TDP 看作“散热系统成本预算”,而非“能源效率绝对值”。

误读 5:某家云厂商自研定制芯片成功了,就会“摆脱对 NVIDIA 的依赖”。 定制 ASIC(如 TPU、Trainium)仅在特定框架和算子集合内表现优异,且研发周期需 2-3 年(从立项到导入业务,据 The Information 2023 年对 ASIC 项目的调查)。云厂商当前策略普遍是“NVIDIA GPU + 自研 ASIC 双轨并行”,而非二选一。跟踪有效指标应是该云厂商 AI 训练/推理任务在不同平台上的分配比例趋势(但此数据各厂商未公开细拆,仅能从有限的外部采购指引和 CPU/GPU 支出结构中推测)。

最新事件

NVIDIA Blackwell/B200 发布(2024 年 3 月 GTC)

  • 首次公开 B200 规格:2080 亿晶体管,192GB HBM3e 带宽 8TB/s,双芯片封装(算力与互联芯片拼合),NVLink 5.0 带宽翻倍。
  • 同步发布 GB200 NVL72——将 72 颗 B200 与 36 颗 Grace CPU 封装为一个液冷机架,集群规格指向百万 GPU 级扩展。
  • 产业影响:规格确立意味着 2024H2-2025 年供应链(HBM3e、液冷组件、1.6T 光模块/铜缆)订单结构将发生迁移。CoWoS-L 封装从 Blackwell 开始导入(据 NVIDIA 新闻稿),可能改变先进封装格局。

台积电 CoWoS 扩产加速(2023Q3-2024Q2 多次法说会跟进)

  • 2024 年 CoWoS 产能预计翻倍至 ~35k-40k wpm(等效晶圆),2025 年目标增至 55k-60k。
  • 新进供应商:部分设备和材料环节可能引入第二条供应链(据台湾工商时报 2023 年 11 月报道,封测厂日月光等探讨部分支援产能)。这将影响 AI 芯片高规格产品的供应稳定性和定价。

HBM3e 稳定量产与 16Hi 路线图推进

  • SK 海力士 2024 年 3 月宣布开始量产 8Hi HBM3e,并在 2024Q1 业绩会上透露 12Hi 产品已完成客户验证(据 SK hynix IR)。16Hi HBM4 目标 2025-2026 年(JEDEC 路线图及公司公告)。
  • 三星和美光积极追赶。三星 2024 年 5 月展示 16Hi HBM3e 样品(据 AnandTech 报道 Samsung Foundry Forum),美光明确跳过 8Hi 直接做 12Hi HBM3e(Micron 2024Q2 财报会)。

美国出口管制加严预期(2024Q1-Q2 部分媒体报道)

  • Reuters 2024 年 4 月报道,美国商务部正讨论扩大高性能芯片出口限制范围,可能包括 HBM 的管控阈值。若成真,部分 AI 芯片规格(尤其是 HBM 容量/带宽上限)将被迫为中国市场定制“降规版”,类似 H800→H20(据 NVIDIA 2024 年 Q1 10-Q,H20 已获美国出口许可并开始对华供应)。这将增加设计冗余和库存管理复杂度。

AMD MI300X 放量(2023Q4-2024 年持续更新)

  • MI300X 2023Q4 开始出货(AMD 2023Q4 财报),2024 年营收指引上调至 40 亿美元(AMD 2024Q1 财报电话会,CFO 评论,口径为数据中心 GPU 全年合计)。其 192GB HBM3 规格一度领先 NVIDIA 同代产品(H100 80GB),虽随后被 H200 141GB 和 B200 192GB 追平,但在推理性能方面表现获得部分微软、Meta 公开采用背书(两家于 2023 年底至 2024 年初各自宣布部署)。

CXL 和 UCIe 生态进展(2023-2024 年持续)

  • CXL 2.0 标准的正式应用在数据中心服务器平台持续推进——Intel Granite Rapids(预计 2024Q3 发布,据 Intel 路线图)将原生支持 CXL 2.0 Type 3 内存池化。这一规格允许系统解耦内存和计算,影响未来 AI 芯片的内存规格设计(是否需要最大的本地 HBM vs 通过 CXL 共享池化大内存)。
  • UCIe 1.1 规范 2023 年底发布(UCIe Consortium 新闻稿),增加汽车和 streaming 协议支持。量产级 UCIe D2D IP 由 Synopsys/Cadence/Alphawave 等多家提供,有望降低非 NVIDIA 阵营做 chiplet 方案的门槛。

跟踪指标

短期(月/季度)跟踪

  • 主要 AI 芯片厂商季度营收及指引(NVIDIA 每 Q 数据中心营收、AMD 数据中心 GPU 营收、Intel 加速器业务线营收),与规格代际迁移互验。
  • TSMC 月度营收和 CoWoS 扩充进度(法说会、产业链调研数据)。
  • 三家 HBM 供应商(SK 海力士、三星、美光)HBM 产能利用率与交货 lead time(公开财报或产业媒体报道,如 TrendForce 季度更新)。
  • NVIDIA/AMD 下一代产品的流片传闻或官方披露节点(通常距离正式发布 6-12 个月)。
  • 美国 BIS 出口管制规则修订公告及新增技术指标门槛。

中期(半年至一年)

  • 云厂商(AWS/Google Cloud/Azure)季度 CapEx 及 AI 工作负载分配指引(可从财报电话会与管理层评论中获取,通常不精确到具体芯片型号占比)。
  • 新代际 GPU 的 SPEC/MLPerf 等第三方 benchmark 公布(MLPerf 训练和推理约每半年发布一次完整结果,最新至 2024 年 6 月)。
  • 客户侧延迟:若出现“有规格无批量”现象(如某高规格 SKU 发布 6 个月后公开供应商仍无法大批交货),跟踪对 OEM/ODM 厂商季度出货量影响。
  • CXL 规范在主流服务器平台实际搭载率的渗透(跟踪联想/戴尔等主流 OEM 的新品配置)。

长期(2 年+)

  • 系统级全栈规格(POD/Datacenter-level)的演进与标准化(如 MLCommons 可能推出数据中心级基准)。
  • 硅光互连/oio 的商用成熟度——若实现,板级至芯片级的带宽规格将发生质变。
  • 定制 ASIC 内部部署占比——可通过云厂商公开的 AI 实例类型数量、价格与采购 GPU 比例侧面对比推断(不完全透明,需综合多方信息)。
  • 中国大陆 AI 芯片(华为昇腾等)的规格追赶进度与公开性能验证数据。

信源

参考基准类

  1. NVIDIA H100 Tensor Core GPU Architecture Whitepaper(2022),NVIDIA 官方技术白皮书。
  2. NVIDIA Blackwell Platform Technical Overview(2024 GTC),NVIDIA 官方公开资料。
  3. AMD Instinct MI300X Accelerator Data Sheet(2024),AMD 官方 datasheet。
  4. Intel Gaudi 2/Gaudi 3 规格页面(2023-2024),Intel 官方。
  5. Google Cloud TPU v5p 系统架构文档(2023),Google Research Blog/Cloud 博客。
  6. AWS Trainium2 及 NeuronCore 技术概述(2023 re:Invent),AWS 官方博客。
  7. JEDEC HBM3/HBM3e 标准文献(JESD238 系列),JEDEC 官方网站。
  8. UCIe 1.1 Specification(2023),UCIe Consortium 白皮书及规范文件。
  9. PCI-SIG PCIe 5.0/6.0 规范(2021/2022),PCI-SIG 官方。

产业数据与跟踪 10. TechInsights 芯片拆解与物料成本分析(2023 年多款 AI 芯片拆解报告),订阅制。 11. SemiAnalysis 付费研究报告(2022-2024 年对 AI 芯片、封装、HBM 的深度产业链分析),订阅制。 12. TrendForce《存储产业季度追踪》及《HBM 市场专题报告》(2024Q1-Q2),订阅制。 13. Gartner《Worldwide AI Semiconductor Revenue》(2024)。 14. IDC《Worldwide Quarterly Server Tracker》(2024)。 15. Yole Group《先进封装产业报告》(2024Q2)。 16. TSMC 季度法说会简报及纪要(2023-2024),TSMC IR 官网。 17. NVIDIA、AMD、Intel 季度财报与电话会纪要(2023-2024),各公司 IR 官网。 18. SK 海力士、三星电子、美光科技季度财报及投资者演示材料(2023-2024),各公司 IR 官网。

分析与新闻类 19. AnandTech/Tom‘s Hardware:芯片架构分析与规格解读(各年度)。 20. DIGITIMES Research:半导体制造与封装产业链动态(2023-2024)。 21. 台湾工商时报/经济日报:台积电 CoWoS 产能与合作伙伴报道(2023-2024)。 22. Reuters/Bloomberg:出口管制与数据中心资本开支相关新闻(2024)。 23. The Information:AI 芯片产业内幕报道(2023-2024 年系列文章),订阅制。 24. ZDNet Korea 等韩媒:三星/SK 海力士 HBM 产业新闻(2024)。

补充技术参考 25. MLPerf 官方结果数据库(mlcommons.org),训练与推理 v3.0-v4.0 基准测试结果。 26. C. C. Lee 等,《先进封装良率模型》(2022 IEEE 相关论文),一般性建模参考。 27. Vertiv 数据中心散热白皮书(2023),产业经验数据参考。 28. Morgan Stanley 等投资银行研报(2024)中有关 CoWoS/HBM 市场空间测算的内容,仅作外部产业估算来源参考。

免责声明:本页面内容基于公开行业知识编写,所有数据均注明来源、口径和年份,无实时市场数据,不构成投资建议。具体产品规格请以各厂商最新发布为准。本页面不包含任何个股推荐、买卖建议、涨跌预测或“值得买/可买入”等措辞。

source: 公开披露与公开资料整理 本页仅用于产业链学习、信息检索和研究辅助;不构成投资建议,不预测涨跌,不提供买卖、仓位或目标价建议。
完整概念页 复盘 13 节结构 公司投研页 沿产业链找到受益公司 投资课 把概念转成可跟踪模型