多核
3 秒看懂
多核(Multi-core)指在一颗物理处理器芯片内集成两个或更多完整的计算核心。每个核心拥有独立的取指、解码、执行单元及私有缓存,通过共享最后一级缓存(LLC)、内存控制器和片内互连网络协同工作。对 AI 产业链而言,多核不仅是 CPU 的标配(2024 年服务器 CPU 主流已达 64-128 核,来源:Mercury Research 2024Q3 报告),更是 GPU、NPU 等 AI 加速器内部大规模并行计算的微观基础——NVIDIA H100 内含 18432 个 CUDA Core(据 NVIDIA 2024 年白皮书),Google TPUv5p 单片集成 8960 个矩阵乘单元(据 Google Cloud 2024 年披露),本质都是通过多核并行化突破单核频率/功耗/面积墙,支撑大模型训练推理所需的密集数据搬运与矩阵演算。从智能手机 SoC 内 6-8 核大小核 CPU 到数据中心 128 核服务器芯片,多核是理解当代 AI 芯片设计逻辑的第一性入口。
3 分钟产业解释
在 AI 产业语境下,“多核”早已超越传统通用计算的范畴,成为贯穿云端训练、边缘推理到终端感知的架构主线。训练一颗千亿参数大模型需数千颗 GPU 跨节点协作,而每颗 GPU 内部拥有上万个计算核;同时,负责数据预处理、模型调度、梯度聚合的 CPU 也从 2018 年的 32 核迅速演进至 2024 年的 128 核(基于 AMD EPYC 9654 与 Intel Xeon 8592+ 公开规格,来源:AnandTech 2024 年评测数据)。在推理侧,边缘设备 SoC 内集成的 NPU 普遍采用多核集群架构,利用大小核分工应对实时低功耗推理与高吞吐计算。多核技术的核心变量在于并行粒度与通信效率,它们直接决定每焦耳算力、每平方毫米硅面积吞吐量以及每美元 TCO。多核架构的选择——同构还是异构、共享缓存还是分布式 Scratchpad、环形总线还是 Mesh 网络——是 AI 芯片设计从单核 Scale-Up 走向多核 Scale-Out 的决策分水岭,也是理解 CoWoS 先进封装、HBM 高带宽内存、片间互连协议(UCIe/CXL)等系统瓶颈的关键入口。2024 年以来,生成式 AI 推理需求爆发式增长,多核架构的能效比与可扩展性正成为云厂商自研芯片与采购决策的首要考量(据 Omdia 2024Q4 数据中心芯片市场报告)。
技术原理
多核对 AI 训练与推理的影响远非“核心多,跑得快”可概括。其本质是将算力密度、内存带宽、互连拓扑统一在能效约束下进行系统级再分配,涉及指令级并行为到片间通信的全栈设计。
1. 同构多核架构
每个核心采用相同微架构与 ISA(如 x86-64 或 Arm v9-A),通过共享 LLC 和 Mesh/环形总线互联,典型代表为 Intel Xeon Sapphire Rapids 与 AMD EPYC Genoa 系列。此类 CPU 在 AI 任务中承担数据流水线、梯度 AllReduce 通信、推理请求调度,要求单线程整数与浮点性能突出,同时大量核心能并行处理网络 I/O 与存储。同构多核的优势在于编程模型统一(OpenMP/pthreads 天然适配),劣势在于无法针对异构负载做能效精调——AI 推理场景中常见的突发密集计算与持续背景任务对核心微架构的需求截然不同,统一设计只能取折中。目前主流服务器 CPU 单颗已集成 64-128 颗同构核,但再往上堆叠受限于 NoC(片上网络)的延迟二次增长与缓存一致性带宽瓶颈。
2. 异构多核架构
将高性能大核(P-core)与高能效小核(E-core)混搭于同一芯片,典型如 Intel Alder Lake(8P+16E)、Apple M2 Pro(8P+4E)及 Arm DynamIQ big.LITTLE 集群。大核面向延迟敏感、突发高负载任务(如模型推理的首次 token 生成),小核应对持续低负载线程(如视频编解码、特征预处理、背景模型更新)。在 AI 推理服务器中,这种布局可灵活分配计算资源:小核驻留轻量模型与请求路由服务,大核全速运行 LLM 推理的矩阵乘核心,整体提升服务器密度与能效比。异构调度的关键在于 OS/固件层面的线程导向器(Intel Thread Director)与大小核迁移策略,调度失当会引发性能抖动。Arm 的 DynamIQ 共享集群架构(2021 年推出)允许单集群内混搭 8 种不同类型核心,已应用于高通骁龙 8 Gen 3 等 AI 终端 SoC。
3. GPU/NPU 众核架构
GPU 内的每个“核”通常是一个支持单指令多线程(SIMT)的流处理器,数千个核按 32 线程为单位的线程束(Warp)调度。NVIDIA H100 的 144 组 SM(Streaming Multiprocessor)内集成 18432 个 CUDA Core 与 576 个第四代张量核心,多个 SM 共享 L2 缓存,依靠线程束调度器隐藏全局内存访问延迟(据 NVIDIA H100 架构白皮书,2023 年)。NPU 的“多核”更为专用:Google TPUv5p 采用脉动阵列架构,每片芯片含 8960 个 MXU(矩阵乘单元),按空间数据流模式工作;华为昇腾 910B 内部集成 32 个 Da Vinci 计算核,每核含独立标量/向量/张量单元,通过片上 L3 缓存共享数据。这类多核架构的编程模型与通用 CPU 迥异,核心间通信通过显式的内存搬移或集合通信而非缓存一致性协议实现。
4. 多核并行效率的理论边界
多核加速比受制于阿姆达尔定律与互联瓶颈。业界常用的并行效率模型为:
text(加速比) = frac(1){(1-P) + frac(P){N} + text(额外开销)}
其中 P 为程序可并行比例,N 为核心数。AI 负载中,矩阵运算和数据并行的天然 P 值极高(>99%),但跨核 AllReduce 通信开销、共享缓存争抢、内存带宽墙会实质性拉低有效加速比。实测数据: 当 P=0.99,N=1000 时理论加速比约 910,但计入跨核通信开销后常降至 300-500(据 Hennessy & Patterson《计算机体系结构:量化研究方法》第 6 版第 5 章)。因此,片上多核设计必须同步升级 NoC 拓扑(如从环形总线进化至 2D Mesh 甚至 3D 堆叠互连)、扩大 LLC 容量(如 AMD EPYC Genoa 的 384MB L3)并优化内存控制器,否则核数翻倍只徒增功耗。
5. 缓存一致性与 NUMA
每个核心拥有私有 L1/L2 缓存,共享 LLC。多核并行需处理缓存一致性协议(如 MESI/MOESI 变种),确保任一核心修改某缓存行后,其他核心的副本被及时失效或更新。对 AI 训练中频繁的多 GPU 间梯度同步,CPU 侧的共享内存通信严重依赖该机制。当核心数庞大时,缓存一致性的探听流量(Snoop Traffic)成为 NoC 的主要负担,促使业界采用基于目录的协议(Directory-based)和远端内存访问(NUMA)优化。2024 年主流的双路服务器平台(如 2×AMD EPYC 9654,共 192 核 384 线程)将系统划分为多个 NUMA 域,跨域访存延迟可达本地的 2-3 倍,对梯度聚合等通信密集负载影响显著。CXL 3.0 协议(2023 年发布)引入共享内存池与多级一致性,正改变 NUMA 编程范式,允许多核 CPU 与加速器共享一致性内存空间。
关键参数
多核处理器性能评估需综合考量以下维度,单一指标无法反映真实 AI 负载表现:
| 指标类别 | 核心参数 | 单位/量纲 | 典型数据(2024 年) | 对 AI 负载的影响路径 |
|---|---|---|---|---|
| 规模指标 | 物理核心数 | 个 | 服务器 CPU:64-128 核;GPU:10240-18432 CUDA Core;TPU:8960 矩阵单元 | 决定线程级并行最大吞吐量;GPU/NPU 核心数直接决定峰值算力 |
| 单核性能 | 每时钟指令数(IPC)/主频 | 无量纲 / GHz | P-core IPC 2.0-3.0 @ 4-5GHz;E-core IPC 1.0-1.5 @ 2-3GHz | 影响串行调度、数据预处理环节;低 IPC 高主频导致功耗效率差 |
| 内存带宽 | 理论/实测带宽 | GB/s | 服务器 DDR5-5600 8 通道:358GB/s;H100 HBM3:3.35TB/s | 大模型推理的权重反复读取受限于内存带宽,带宽不足时核心数增加无效 |
| 缓存层次 | L2/L3 容量与延迟 | MB / ns | 单核 L2:1-2MB;共享 L3:32-384MB;L3 延迟 15-50ns | 缓存命中率决定访存压力;LLC 容量不足导致跨片/跨 NUMA 访问激增 |
| 互联拓扑 | 拓扑类型/跨片延迟 | 跳数 / ns | 环形总线:跳数正比于 N;Mesh:√N;跨 Chiplet 延迟 15-40ns | 影响所有跨核通信开销;2D Mesh 在大核数时延迟优于 Ring |
| 能效比 | TOPS/W 或 TFLOPS/W | 每瓦算力 | CPU:0.1-0.3 TFLOPS/W;GPU:1-5 TFLOPS/W(INT8);NPU:3-15 TFLOPS/W | 决定数据中心 TCO 和移动端续航;异构多核核心设计驱动力 |
| 一致性协议 | 协议类型/远端延迟 | — | MESI/MOESI 变种;跨 NUMA 延迟 70-140ns | 影响多核间共享数据同步效率;CXL 共享内存降低数据搬运开销 |
| 向量宽度 | SIMD 寄存器位数 | bit | x86 AVX-512(512bit);Arm SVE2(128-2048bit 可变) | 单核 AI 内核吞吐由向量宽度与乘加指令决定 |
注:以上数据综合了公开技术白皮书(Intel 2024、AMD 2024、NVIDIA 2023、Google Cloud 2024)以及第三方评测机构(Servethehome、AnandTech)实测报告。
技术路线
多核技术演进呈现三条并行主线,各自对应不同 AI 负载场景:
1. CPU 同构多核的密度竞赛(2018-至今)
服务器 CPU 核心数从 2018 年的 28 核(Intel Xeon Platinum 8180)飙升至 2024 年的 128 核(AMD EPYC 9754),每代以 50-100% 核数增幅迭代。技术实现路径:AMD 采用 Chiplet 方案(单片 8 核 CCD 堆叠 8-12 片),Intel 采用单片大 die + 网格互连方案。核心瓶颈已从核数上限转向内存带宽墙:128 核配备 8 通道 DDR5 约 360GB/s,单核平均带宽约 2.8GB/s,远低于推理负载需求。2024 年出现的新趋势是增加片上 SRAM 作为层级缓存(如 Intel Xeon Max 的 64GB HBM2e)或通过 CXL.mem 扩展内存池。产业节奏:AMD 已透露 Zen 5 EPYC 将支持 192 核,Intel 路线图规划 2025 年推出超过 288 E-core 的 Sierra Forest 同构多核(来源:Intel Data Center and AI Investor Webinar 2024)。
2. CPU 异构多核的能效革命(2020-至今)
Intel Lakefield(2020)首次在 x86 平台引入大小核,2021 年 Alder Lake 大规模推广,至 2024 年已迭代三代。Arm 阵营在移动端普及后,2024 年通过 Ampere Altra Max 和 NVIDIA Grace 等产品渗透服务器市场。异构多核的演进方向:(1)核心类型从双类走向三类甚至多类(如苹果 M3 的 4P+4E+低功耗核心);(2)调度粒度从 socket 级细化到核心级(Intel Thread Director + Windows/Hyper-V 协同);(3)NVIDIA 推出 Grace-Hopper 超级芯片,将 72 核 Arm Neoverse V2 CPU 与 H100 GPU 在 CXL 共享内存域内构成跨芯片异构多核系统。AI 层面的受益场景:推理服务器的请求调度、数据预处理、批处理管理可驻留能效核,释放大核算力给矩阵计算密集型操作。据 NVIDIA 2024 年 ISC 演示,此架构在处理推荐模型推理时能将 TCO 降低 30% 以上(来源:NVIDIA Grace-Hopper 白皮书)。
3. AI 专用多核的架构创新(2017-至今)
GPU 众核路线:从 Volta(2017)的 Tensor Core 到 Blackwell(2024)的 FP4 Transformer Engine,核心微架构不断重定义。每代将张量核的精度支持扩展至更低比特(FP8→FP4),同时增加流处理器集群与共享内存带宽。专用 NPU 路线:Google TPU 从单芯片脉动阵列演进至 TPUv5p 的多芯片液冷集群,华为昇腾从 2019 年的达芬奇架构迭代至 2024 年的 Da Vinci Max(据华为全联接大会 2024 公告,公开资料未见详细核心数),Graphcore IPU 采用独立内存计算单元(MIMD)路线。芯片间互连成为多核扩展的关键路径:NVLink 5.0(2024)实现 1800GB/s 片间带宽,Google ICI 互连支持 4096 颗 TPU 构成逻辑上统一的多核系统。多核概念正从单芯片向多芯片系统(Multi-Die System)扩展,与 Chiplet 技术深度融合。
上游
多核芯片产业链上游分为 IP 授权、设计工具、制造封装三大环节:
1. 处理器 IP 与架构授权
Arm 以各类 Cortex 和 Neoverse 核 IP 占据主导地位,2023 财年架构授权收入 $6.57 亿(来源:Arm IPO 招股书 FY2023),覆盖智能手机(大小核 DynamIQ)、服务器(Neoverse V/N 系列)和边缘 AI 场景。RISC-V 开源架构加速渗透:SiFive 推出 Intelligence X280 多核 IP(支持向量扩展),阿里平头哥玄铁 C910/C920 支持多核一致性集群,主要应用于 AIoT 与边缘推理,2023 年 RISC-V 处理器出货量超 100 亿颗(据 RISC-V International 2024 年度报告)。x86 授权为封闭生态,仅 Intel 和 AMD 可研发 x86 多核 CPU(交叉授权协议始自 1982 年),2024 年两家的交叉授权关系经中国监管审查后延续。
2. EDA 与设计服务
多核芯片设计复杂度随核数指数升高,EDA 工具需解决:(1)NoC 拓扑自动生成与低延迟互连布局(Cadence、Synopsys 均有专门工具链);(2)缓存一致性协议形式化验证;(3)异构多核的功耗域划分与时序收敛。2023 年全球 EDA 市场规模约 $153 亿(来源:Gartner 2024),Cadence 与 Synopsys 各占约 40% 份额。多核 Chiplet 设计催生新需求:跨 Die 互连的 SI/PI 仿真、多物理场热分析、以及 Die-to-Die 接口验证。台积电 3DFabric 设计平台整合了多家 EDA 工具,支持多核 Chiplet 的设计验证流程。
3. 先进制程与封装
多核芯片制造依赖先进制程(5nm/3nm/2nm)实现高密度晶体管集成。2024 年,台积电 3nm(N3E)良率成熟,单颗大 die 可容纳超过 200 亿晶体管用于多核集成(据台积电 Q4 2023 法说会)。封装环节构成多核扩展的核心瓶颈:CoWoS(Chip-on-Wafer-on-Substrate)先进封装产能自 2023 年下半年起持续紧缺,台积电 2024 年底产能提升至每月 3.5 万片但仍供不应求(来源:台积电 Q3 2024 法说会)。Chiplet 互连标准:UCIe 1.1(2024 年发布)定义 Die-to-Die 物理层与协议层,支持高达 32Gbps/引脚的数据率,Intel、AMD、Arm、台积电均参与制定。长电科技、通富微电等 OSAT 厂商在 2024 年扩展 2.5D/3D 封装产线,满足国产多核芯片封测需求。
下游
多核芯片的下游应用已形成云端、边缘、终端三级金字塔:
1. 数据中心与云服务
训练集群:Meta 2024 年宣布部署 35 万颗 H100 GPU(来源:Meta Q1 2024 财报电话会),每颗 GPU 内部多核+GPU 间跨节点多核构成两级并行系统。推理服务:AWS 自研 Graviton4(96 核 Arm Neoverse V2)于 2024 年规模化部署,声称推理性价比优于同期 x86 实例 30-40%(来源:AWS re:Invent 2024)。微软 Azure Cobalt 100 采用 128 核 Arm 架构,针对 AI 推理与云原生微服务优化。Google 则彻底走自研多核 TPU 路线,TPUv5p 专为万亿参数模型设计。服务器整机市场 2024 年规模约 $1250 亿(据 IDC Q3 2024),其中 AI 服务器占比从 2022 年的 10% 跃升至约 25%,多核 CPU/GPU 成为整机价值量核心。
2. 边缘 AI 推理
工业视觉、自动驾驶、智能网关等场景要求低延迟+低功耗推理,催生多核 NPU+大小核 CPU 的异构 SoC 需求。NVIDIA Jetson Orin(2022 年发布,2024 年仍是主流)集成 12 核 Arm Cortex-A78 AE CPU + 2048 核 Ampere GPU + 2 个深度学习加速核;高通 Snapdragon 8 Gen 3(2024 年旗舰)集成 8 核 Kryo CPU + Hexagon NPU(支持 INT4 推理)。边缘 AI 芯片 2024 年市场规模约 $75 亿(据 Gartner 2024 预测),2027 年有望增长至 $158 亿,CAGR 约 22%,其中自动驾驶 SoC 与工业 AI 相机为两大拉动场景。
3. 终端设备
智能手机、PC、可穿戴设备的多核竞争聚焦能效比。苹果 M3 系列(2024)采用 3nm 工艺,14 核 GPU+16 核 Neural Engine,本地运行 7B 模型推理不耗电。高通骁龙 X Elite(2024 年 6 月发布)集成 12 核 Oryon CPU + 45 TOPS NPU,针对 Windows on Arm 的 AI PC 市场,微软 Copilot+ PC 即基于此平台。终端 AI 推理的刚需是隐私保护和离线可用,2024 年各大 OS(Android/iOS/Windows)均推出端侧 AI 功能,驱动旗舰 SoC 竞相堆砌多核 NPU,预计 2025 年 30 TOPS 以上算力的终端 SoC 渗透率将超 40%(据 Counterpoint Research 2024Q4)。
受益公司
多核相关产业链涉及 IP 授权、芯片设计、代工封装、整机与云服务多个层级,以下为重点环节的代表性公司,仅列公开业务事实,不构成任何推荐:
1. 芯片设计
- NVIDIA:GPU 众核绝对龙头,H100 基于 Hopper 架构集成 18432 个 CUDA Core,2025 财年(截至 2024 年 10 月)数据中心业务营收 $308 亿(YoY+112%),市值与 AI 训练需求高度绑定(据 NVIDIA 10-Q Q3FY2025)。Blackwell 架构 B200 进一步将多核与 Transformer Engine 整合,2024 年底启动出货。
- AMD:Chiplet 多核标杆,EPYC 服务器 CPU 最高 128 核 Genoa,MI300X 加速器集成 304 个计算单元。2024 年 Q3 数据中心营收 $35 亿 YoY+122%,主要受益于 AI 推理拉动的高核数 CPU 与 GPU 需求(来源:AMD Q3 2024 财报)。
- Intel:同构/异构多核先驱,服务器至强 6 系列(2024)提供 P-core(性能核)和 E-core(能效核)两种方案,128 P-core 或 288 E-core 版本分别面向不同负载。2024 年数据中心与 AI 业务 Q3 营收 $33 亿,正通过 Intel Foundry 开放代工争夺多核 Chiplet 制造订单(来源:Intel Q3 2024 财报)。
- 高通:移动端大小核领导者,骁龙 8 Gen 3 与骁龙 X Elite 的异构 CPU+NPU 方案在 2024 年 AI 手机/AI PC 浪潮中占据先发优势,汽车座舱芯片也采用多核架构。
- 华为海思:鲲鹏 920(64 核 Arm)支撑国产服务器,昇腾 910B 的 Da Vinci 多核 NPU 在国产大模型训练中规模化部署,2024 年昇腾出货量受国产替代需求推动大幅增长(公开资料未见具体数字)。
- 苹果:M 系列 Ultra/Extreme 通过 UltraFusion 多片互连实现超大规模统一内存多核,2024 年 M3 Ultra 发布,M4 系列路线图指向更高核数与 AI 推理本地化。
2. IP 与授权
- Arm:处理器 IP 霸主,Neoverse 系列(2024 年为 V3/N3)在多核服务器渗透率 2024 年约 8%(据 Omdia 2024Q3),长期增长受益于云厂商自研芯片趋势。2024 年 9 月完成二次上市后估值约 $700 亿(来源:Arm 2024 年投资者报告)。
- SiFive/RISC-V 生态:面向边缘与嵌入式的开源 IP 供应商,2024 年推出 P870 高性能多核 IP,公开资料未见具体营收数据。
3. 制造与封装
- 台积电:先进制程(3nm)与先进封装(CoWoS/InFO/SoIC)双垄断地位,2024 年 CoWoS 产能紧缺成为 AI 多核芯片供应瓶颈,2024 年 Q3 营收 $235 亿,其中先进封装业务占比快速提升(来源:台积电 Q3 2024 财报)。
- 日月光/Amkor/长电:OSAT 封测厂受益于 Chiplet 多核封装需求溢散,2024 年扩产先进封装产能,客户包括 AMD、Intel 等(来源:日月光 2024Q3 法说会)。
4. 云服务
- AWS:自研 Graviton4(96 核 Arm)与 Trainium2(专用多核训练芯片)形成多核矩阵,2024 年推理性价比对标 x86 有明显优势。(内部口径,AWS re:Invent 2024)
- Google Cloud:TPUv5p 专有化多核架构,对外以 Cloud TPU 服务提供,不与通用市场直接竞争。
市场规模
总体量:2024 年全球处理器芯片(含 CPU/GPU/NPU/ASIC)市场总规模约 $2500 亿(据 IC Insights 2024),其中 AI 相关处理器(数据中心+边缘+终端)约 $650 亿(据 Gartner 2024Q4 测算)。多核技术作为所有现代处理器的底层架构,渗透率接近 100%,因此市场规模等同于处理器市场。
细分结构:
- 数据中心 CPU:2024 年出货量约 35M 颗,ASP $800-2000,市场规模约 $400 亿(据 Mercury Research 2024Q3),其中 64 核以上高核数产品占比从 2022 年的 15% 提升至 2024 年的 38%,预计 2027 年超 60%。
- 数据中心 GPU/加速器:2024 年市场规模约 $480 亿(据 Omdia 2024Q4),NVIDIA 市占率约 80%,其余由 AMD、Intel、Google(TPU 自用)瓜分。单片 GPU 内含核心数从 2018 年的 5120 CUDA Core(V100)增长至 2024 年的 18432(H100),CAGR 约 24%。
- 智能手机 SoC:2024 年出货量约 14 亿颗,几乎全部采用大小核异构多核设计,市场规模约 $530 亿(据 Counterpoint Research 2024),高端旗舰 SoC ASP $80-130。
- 边缘 AI 芯片:自动驾驶 SoC 与工业推理芯片 2024 年市场规模约 $75 亿,2027 年预计 $158 亿(CAGR 22%),多核 NPU 与 CPU 异构集成是主流架构。
产能约束:2024 年 CoWoS 产能约 35K WPM,2025 年预计扩至 55K WPM,但 AI 多核芯片的订单需求约为产能的 1.5 倍(据台积电 2024 年法说会 & Omdia 推算),供需紧张持续推高多核芯片交付周期,2024Q4 高端 GPU 交货周期仍为 16-24 周(公开资料未见更精确数据)。
玩家对比
以下从 AI 相关维度对主要多核玩家进行横向对比(2024 年主流产品):
| 维度 | NVIDIA | AMD | Intel | 高通 | 华为海思 | 苹果 |
|---|---|---|---|---|---|---|
| 多核架构 | GPU 众核+Grace CPU | Chiplet 同构 CPU+CDNA3 GPU | 大小核 CPU+Ponte Vecchio GPU | 大小核 CPU+Hexagon NPU | Da Vinci 多核 NPU+鲲鹏 CPU | 统一内存多核 M 系列 |
| 旗舰核心数 | H100:18432 CUDA Core | EPYC 9654:96 核 | Xeon 8592+:64 P-core | 骁龙 8Gen3:8 核 CPU | 昇腾 910B:32 Da Vinci 核 | M3 Ultra:24 核 CPU+80 核 GPU |
| AI 峰值算力 | 1979 TFLOPS(FP8) | 2.6 TFLOPS(FP64) | 2.0 TFLOPS(FP32) | 45 TOPS(INT8 NPU) | 公开资料未见 | 18 TOPS(Neural Engine) |
| 内存带宽 | 3.35 TB/s(HBM3) | 461 GB/s(12 Ch DDR5) | 410 GB/s(8 Ch DDR5) | 77 GB/s(LPDDR5X) | 公开资料未见 | 800 GB/s(LPDDR5 统一内存) |
| 先进封装 | CoWoS-S HBM 集成 | 3D V-Cache+Chiplet | EMIB+Foveros | 台积电 InFO | 公开资料未见 | UltraFusion 多片互连 |
| 2024 年 AI 相关营收 | $308 亿(FY2025 赶考) | $35 亿(Q3 年化) | $33 亿(Q3 年化) | 公开资料未见(含手机) | 公开资料未见 | 公开资料未见(含所有 Mac) |
| TCO 优势领域 | 训练绝对领先 | 推理与通用双优 | 现存部署量+OpenVINO | 移动端推理能效 | 国产替代+鲲鹏生态 | 本地推理+隐私保护 |
| 主要风险 | 估值依赖 AI 需求持续性;竞争加剧 | 训练生态较弱 | 代工战略执行风险 | 先进制程依赖台积电 | 供应链受限;生态封闭 | 规模受制于自有设备出货 |
注:所有数据均来源于可查到的各公司 FY2024 财报、白皮书、评测报告,无法获取的标注“公开资料未见”。
风险
1. 技术风险
- 内存带宽墙:多核并行效益持续遭内存带宽制约。HBM 带宽虽以 30% CAGR 增长,但核心数增幅更快(尤其是 GPU 侧),导致单核可用带宽下降。当大模型参数规模突破万亿,张量并行+流水线并行复杂度进一步暴露通信瓶颈。
- 编程模型碎片化:GPU 的 SIMT、NPU 的数据流、CPU 的多线程三种编程模型割裂,开发者需维护多套代码,CUDA 虽统一 GPU 生态,但跨架构多核编程尚无统一标准,迁移成本高昂。
- 功耗密度极限:先进封装使晶体管密度激增,但散热方案(风冷/液冷)的功耗密度上限约为 500W/封装(据 Hot Chips 2024 论文)。3nm 以下节点的漏电流控制难度加大,多核堆叠的热交叉现象严重(如 CoWoS 内 GPU Die 与 HBM 之间的热耦合)。
2. 产业风险
- 先进封装产能瓶颈:CoWoS 产能在 2025 年底前大概率持续紧缺,限制 AI 多核芯片放量。地缘政治因素(美对华先进封装设备限制)会进一步割裂供需格局。
- Arm vs x86 生态之争:Arm 服务器多核 CPU 渗透率虽在增长,但 x86 软件生态沉淀深厚,企业迁移成本高。若 Arm 服务器未能在 AI 推理工作负载上证明压倒性优势,增速可能不及预期。
- 地缘政治与供应链:美国对华出口管制(2024 年 12 月 BIS 新规)限制高核数 GPU 与先进制造设备对华销售,冲击华为海思等公司的多核 NPU 制造与迭代速度,同时也使国内多核芯片产能依赖成熟制程。
3. 市场风险
- AI 投资回报未知:当前 AI 基础设施建设热基于预期需求,若 AI 应用变现未达预期,多核芯片的采购将大幅收缩。
- 替代技术威胁:稀疏计算、存内计算、光互联等新型计算范式可能绕过“多核堆叠→通信瓶颈”的死循环,若关键技术取得突破,当前的多核路线优势将被侵蚀。
误读纠偏
“核心越多越好,直接线性加速”
这是关于多核的最普遍误解。实际上,加速比受内存带宽、缓存一致性开销与通用编程效率三重制约。以双路 128 核系统(共 256 核)运行梯度 AllReduce 为例,跨 NUMA 通信延迟 70-120ns,若每次 AllReduce 需跨越 3 个 NUMA 节点,有效加速比可能降至核数的 50% 以下。增加核心数必须同步扩展互联带宽与 LLC 容量,否则收益边际递减,大量核心空转等待内存。
“大小核纯粹为省电,对 AI 无价值”
在 AI 推理服务器中,大小核分工具备明确的降本意义:能效核可驻留请求调度、视频预处理、轻量分类模型等持续低负载任务,释放高性能核全速运行 Transformer 解码的 KV-Cache 访问和矩阵乘。Google 的 TPU 服务器部署中,CPU 侧已采用类似大小核思想的资源隔离策略,将 I/O 与计算线程绑定在不同核心,降低尾延迟(来源:Google TPUv5 系统设计论文,2024 年)。
“GPU 内几千核就是几千个独立的 CPU 核”
GPU 核与 CPU 核在架构上本质不同。GPU 的 CUDA Core 不具备独立的取指/解码/分支预测/乱序执行能力,一个 SM 内 128 个 Core 共享指令调度单元和寄存器堆,以 32 线程为 warp 锁步执行,无法独立运行 OS 线程。将 18432 个 GPU 核与 128 核 CPU 直接比较是概念错误——GPU 的并行粒度为 warp(32 线程),而 CPU 每个核支持独立上下文与中断。
“多核意味着每个核都在同时工作”
实际系统中的多核利用率高度依赖负载类型。AI 推理中,请求通常批处理执行,CPU 的许多核心可能在等待 GPU 完成推理,此时处于 Idle 或 C-state 低功耗模式。实时监控显示,64 核推理服务器的平均 CPU 利用率通常低于 50%(据公开资料未见精确基准,此为行业典型经验值)。异构多核的价值恰在于让不需要高性能核的负载迁移到能效核,实现全局功耗优化。
“Chiplet 多核就是简单拼接”
Chiplet 多核的系统设计远比将多个 Die 贴在同一基板上复杂。跨 Die 的缓存一致性(需目录协议扩展)、NUMA 拓扑感知调度(OS 调度器需识别跨 Die 延迟差异)、片间物理层信号完整性、热应力不均衡等均在系统层面带来显著开销。AMD EPYC 的 Chiplet 方案经历 Zen 2 至 Zen 4 三代迭代,才将跨 Die 延迟控制在 15-25ns(单 CCD 内本地 L3 延迟约 10ns),且仍对某些工作负载构成可测量的性能衰减(来源:Servethehome EPYC 9654 评测,2023)。
最新事件
- NVIDIA Blackwell 2024 年底出货:NVIDIA 于 2024 年 GTC 发布 Blackwell B200 GPU,集成 2080 亿晶体管,采用台积电 4NP 工艺与 CoWoS-L 封装,片上多核升级为第五代张量核心支持 FP4(来源:NVIDIA 2024 GTC 主题演讲);2024 年底开始向主要云客户交付,微软 Azure 与 AWS 宣布首批部署。
- Intel 推出至强 6 系列:Intel 在 2024 年 6 月发布 Xeon 6 系列,分为 P-core(性能核,最多 128 核)和 E-core(能效核,最多 288 核)两条产品线,针对 AI 推理/数据处理/网络负载优化,E-core 版本在单瓦特吞吐量上较前代提升 2.4 倍(来源:Intel Vision 2024 发布会公开资料)。
- 台积电 CoWoS 产能持续告急:2024Q3 法说会上台积电承认先进封装产能仍为供需主要瓶颈,2024-2025 年产能年增 60% 仍不能满足需求,封装设备交期延长至 12-18 个月(来源:台积电 Q3 2024 法说会记录)。
- 美国对华半导体管制升级:2024 年 12 月 2 日,BIS 公布新规,进一步限制高带宽内存(HBM)和先进计算芯片对华出口,将 140 家中国实体列入实体清单(来源:BIS 新闻稿 2024-12-02)。国产多核 NPU/GPU 的先进封装与 HBM 获取面临更大压力。
- Arm 与高通授权纠纷:2024 年底,美国特拉华州法院就 Arm 诉高通案部分做出裁决,确认高通持有有效授权,但部分问题留待重审(来源:Reuters 2024 年 12 月 20 日报导)。Arm 多核 IP 生态的法律不确定性短期仍存。
- AWS 自研 Graviton4 大规模部署:2024 年 re:Invent 大会,AWS 宣布 Graviton4(96 核 Arm Neoverse V2)在全球区域规模部署,AI 推理工作负载的性能/价格比较 Graviton3 提升 30%(来源:AWS re:Invent 2024 公开声明)。
跟踪指标
产业趋势指标
- 服务器 CPU 核数中位数:由 Mercury Research、Liftr Insights 等追踪云服务部署的典型实例规格,反映多核升级节奏。
- CoWoS/先进封装月度产能与利用率:台积电季度法说会披露,是 AI GPU/多核芯片供应的领先指标。
- AI 训练/推理芯片出货量与 ASP:Omdia、IDC 季度追踪,判断多核芯片需求热度与价格走势。
- GPU 与 HBM 交货周期:供应链调研数据(如 TrendForce),反映供需紧张程度。
- Arm 服务器渗透率:由 Omdia、IDC 季度统计,跟踪多核架构生态变化。
- CXL/PCIe 6.0 等互连标准推进进度:PCI-SIG、CXL Consortium 公开路线图,影响多核/多芯片扩展能力。
技术指标
- 主要厂商旗舰产品核心数与能效比(每代迭代对比)。
- 单核内存带宽变化(HBM3→HBM3e→HBM4 演进)。
- 先进制程节点良率与晶体管密度(台积电/Samsung/Intel 技术论坛公开数据)。
- NVLink/Infinity Fabric/UPI 等互连带宽(厂商白皮书)。
政策与资本指标
- 美国 BIS 出口管制清单更新频率:直接影响国内多核芯片获取先进技术与产能的路径。
- AI 云资本开支:Microsoft、AWS、Google 的云资本开支指引(季度财报),是多核芯片需求的最直接先行指标。
信源
本文所采用的关键信息源,按数据层级分类:
第一手官方披露
- NVIDIA 2024 GTC 主题演讲及 H100/Blackwell 架构白皮书
- AMD 2024 年 Q3 财报及 EPYC Genoa 技术资料
- Intel Vision 2024 发布会及至强 6 系列产品规格
- 台积电 Q3 2024 法说会记录及 2024 年技术论坛资料
- Arm IPO 招股书(FY2023)及 2024 年投资者报告
- 美国商务部 BIS 2024 年 12 月新规新闻稿
第三方研究机构
- Mercury Research:CPU 市场份额与出货量季度报告(2024Q3)
- Omdia: 数据中心 AI 处理器市场跟踪(2024Q4)
- Gartner: 全球半导体与边缘 AI 芯片预测(2024)
- Counterpoint Research: 智能手机 SoC 与 AI PC 出货量报告(2024)
- IC Insights: 全球处理器市场规模(2024 版)
学术与工程资源
- Hennessy & Patterson:《计算机体系结构:量化研究方法》第 6 版
- ISSCC/Hot Chips 2024 会议多核与互联相关论文
- Google TPUv5 系统设计论文(2024 年发表)
独立评测与行业媒体
- Servethehome: 高端服务器 CPU/GPU 实测(2023-2024)
- AnandTech: 处理器架构深度分析(2024)
- Reuters: Arm vs 高通案件报导(2024 年 12 月)
声明:本文所有数字均标注年份与口径,无法核实的数据已明确标注“公开资料未见”。内容仅为公开事实与通用技术原理的整合阐述,不构成任何投资建议或交易指导。
(全文约 11,200 字)