概念库 开放阅读

近存计算行业

概念库 · 开放阅读

概念 ID
near-memory-computing
更新时间
2026-06-03
来源数量
1

近存计算行业

1 核心摘要与阅读导引

近存计算(Near-Memory Computing)正从学术探索和特种应用,跃升为全球半导体产业最关键的架构级创新方向。其本质是重构计算与存储的物理及逻辑相对位置,将计算能力推至数据驻留处,从而大幅消解传统冯·诺依曼架构下致命的“存储墙”瓶颈。随着AI大模型参数规模向万亿级迈进,传统处理器与分离式内存间的数据搬运所引发的延迟与功耗已成为整个系统的首要制约,近存计算的产业化进程因此骤然提速。

本报告对近存计算技术进行了全产业链穿透研究,结论显示:以HBM为代表的2.5D/3D封装近存计算已进入大规模商用阶段,成为AI训练与高性能推理服务器的标配;基于SRAM的存内计算(CIM)在端侧与边缘场景开启商业化元年;而计算型存储则沿数据预处理路径稳步渗透数据中心。我们预判,到2028年,广义近存计算将重构超1500亿美元的AI芯片及存储市场格局,并催生先进封装、新型存储、设计工具等一系列百亿级增量赛道。本报告从技术原理、产业图谱、竞争格局、应用场景、风险挑战等十五个维度全景展开,为投资者与产业决策者提供深度参考。

2 近存计算定义与范围界定

近存计算并非单一技术,而是一套以“数据就近处理”为核心理念的体系架构总称。按照计算单元与存储介质的耦合紧密度,可明确划分为三个层级:

第一层级:2.5D/3D封装近存计算。 通过硅中介层(Interposer)、硅通孔(TSV)及混合键合等技术,将大容量、高位宽的存储堆栈(如HBM)与计算芯片(GPU、ASIC、CPU)在物理上就近封装于同一基板或垂直集成。计算单元与存储单元仍未“合一”,但物理距离从传统多厘米量级骤缩至数百微米甚至数十微米,从而获得数量级提升的互联带宽和大幅降低的每比特能耗。这是目前商业化最成熟、规模最大的形态。

第二层级:存内计算(PIM/CIM)。 将计算功能直接嵌入存储阵列内部,利用存储器固有的并行性和模拟特性完成乘加等核心运算。具体包括在SRAM、DRAM或新型非易失性存储器(NVM)阵列的位线/字线上部署模拟或数字计算电路。此路径最大限度消除了数据运输,有望逼近理论能效极限,但因模拟计算精度、工艺变异、热管理等挑战,处于从端侧向更大算力场景攻坚的阶段。

第三层级:计算型存储。 将轻量级可编程计算引擎(如ARM核、FPGA加速器)集成到存储设备控制器(SSD、存储节点)中,支持在数据出口处直接执行过滤、压缩、查询等操作,使返回给主计算器的数据量显著缩减。其改动成本和生态入侵度相对最低,是存量系统能效挖潜的重要手段。

本报告将全面覆盖上述三个层级,对技术、产业链与市场进行一体化解析。

3 技术爆发的底层驱动力:存储墙危机

近存计算爆发的根本原因在于处理器与存储器之间日益悬殊的性能剪刀差。过去三十年,以GPU为代表的逻辑芯片算力增长超90,000倍,而DRAM的带宽仅增长约30倍,延迟改善更是只有个位数倍数。这导致在高性能计算和AI负载中,超过60%的能耗和数据搬运相关,大量计算单元处于“等待数据”的空转状态。

在AI大模型训练场景中,这一矛盾已到临界点。以1750亿参数的GPT-3模型为例,即使采用最先进的GPU集群,模型参数与优化器状态等存储需求远超单卡显存,需跨芯片通信和频繁的HBM与外部存储交互。每一次参数更新都意味着海量数据在逻辑芯片和存储芯片之间搬移,存储墙造成的实际计算利用率往往不足50%。万亿参数时代,若沿用旧有分离式架构,功耗和延迟将完全不可接受。

因此,近存计算不再是“锦上添花”的性能优化,而是“生死攸关”的架构必须。它通过将数据移动距离最小化,直接攻击系统功耗方程中占比最大的项。据我们测算,采用3D堆叠的近存方案对比传统GDDR6方案,相同算力下可节约40%-60%的IO功耗,并使有效带宽提升5倍以上。这种颠覆性的效率革命,是近存计算成为产业重心的底层逻辑。

4 技术路径之一:2.5D/3D先进封装近存计算(上)

2.5D封装是目前AI旗舰芯片的绝对主流范式。其核心是将逻辑芯片与HBM堆栈肩并肩放置在无源或有源硅中介层上,通过中介层内的微观金属连线实现超高密度互联。代表产品如NVIDIA H100/H200/B200系列、AMD MI300X等。以NVIDIA H200为例,其搭载的HBM3e堆栈总带宽高达4.8 TB/s,与GPU裸片间的连线宽度达到每引脚12Gbps以上,物理连线长度不超过5mm。这一带宽相当于在指甲盖大小的面积内实现近万条传统DDR内存通道的聚合能力,且信号完整性与功耗控制均达到极致。

先进封装技术本身构成了这一路径的坚实底座。台积电的CoWoS(Chip-on-Wafer-on-Substrate)技术是其中的制高点,其最新版本CoWoS-L将中介层面积逐步推至3倍掩模版尺寸以上,单一封装可容纳高达12个HBM堆栈与多个大型计算裸片。英特尔则通过EMIB(嵌入式多芯片互联桥接)技术,在基板中埋入硅桥实现裸片间局部高密度互联,兼顾灵活性与成本。三星推出I-Cube和X-Cube等3D堆叠方案,推进逻辑与存储的垂直整合。这些封装技术的演进,直接定义了单颗AI芯片的存储墙高度和算力天花版。

5 技术路径之一:2.5D/3D先进封装近存计算(下)

更激进的3D集成将存储与计算裸片垂直堆叠,实现近乎一体化的融合。AMD的MI300 APU是里程碑式产品,它利用混合键合(Hybrid Bonding)技术将CPU/GPU芯粒与HBM3堆栈直接面对面键合,互联间距仅有几微米量级,电性能上接近片内总线。单颗APU内部实现了5.4 TB/s以上的统一内存带宽,允许CPU与GPU核共享同一物理存储空间,彻底消除了分离内存架构下的数据复制开销。该方案在超算和大型模型推理中展现出惊人的能效优势。

然而,3D堆叠近存计算也面临着严峻的工程挑战。首先是热密度危机:逻辑芯片与存储芯片叠加,功率密度急剧攀升,现有散热方案难以在垂直方向有效传导数百瓦热量。多物理场协同设计和微流体冷却等成为须攻克的前沿课题。其次是良率与成本:垂直键合要求芯片间达到极低的错位容忍度,任何一片裸片失效都将导致整个堆栈报废,测试与修复成本高昂。再者,存储与逻辑工艺并非天然兼容,需依靠设计技术协同优化(DTCO)来平衡性能与可行性。尽管如此,产业界普遍认为,3D集成是解锁Zettascale计算的必经之路,2025-2027年间将看到更多融合存储与逻辑的3D IC产品问世。

6 技术路径之二:存内计算 PIM/CIM 的深度解析

存内计算(Processing-in-Memory / Computing-in-Memory)的核心思想是在存储单元内构建计算能力,直接利用存储体的物理规律进行运算。目前分为两条技术分支:

SRAM-CIM: 由于SRAM与逻辑芯片工艺完全兼容,且具备高速和近乎无限的擦写耐久性,SRAM-CIM率先实现商业化。其典型运作方式为:同时开启多行字线,使多行存储单元接通到位线,利用电荷共享效应(或电流叠加)在模拟域完成乘法累加,再通过模数转换器(ADC)输出数字信号。此类架构特别适合存算需求极高的Transformer自注意力机制和卷积运算。以知存科技的WTM-8系列为例,其在语音降噪和关键词识别应用中,能效比达到传统数字DSP的10倍以上,算力密度可达数十TOPS/W。除知存外,台湾地区的Neuchips、美国的Mythic(虽然破产重组,但技术路径先行验证)等均在此赛道。2024年多个手机SoC厂商已评估在下一代NPU中集成SRAM-CIM IP,用于实现超低功耗常开(Always-on)AI。

新型非易失性存储器(NVM)CIM: 利用ReRAM(阻变存储器)、MRAM(磁性存储器)等器件的本构物理特性,构建交叉阵列(Crossbar Array)。根据欧姆定律与基尔霍夫电流定律,阵列输入电压向量与存储阵列的电导矩阵相乘,输出电流即为乘积结果。一个4F²的单元可同时存储权重并执行计算,理想密度极高。但现实挑战不容小觑:模拟计算的精度受器件非线性、随机电报噪声和周期间波动影响,等效精度通常仅在4到6位;交叉阵列的潜行电流和延迟限制规模;ReRAM的擦写耐久性(约10⁶次)对于需要频繁权重更新的在线学习场景不足。目前全球领先的研究(如ISSCC/VLSI 2023-2024会议论文)已成功演示基于28nm/40nm ReRAM的8-128KB规模的宏单元,在图像识别任务中展现出单位面积算力20 TOPS/mm²以上的潜力,但要达到实用化大算力芯片仍需突破器件工程与纠错机制。

7 技术路径之三:计算型存储架构解构

有别于前面两类对硬件的激进改造,计算型存储(Computational Storage)从系统软件和固件层面入手,将特定计算任务卸载到存储设备上。其典型架构是在NVMe SSD或网络存储节点的控制器中,嵌入多核ARM处理器或专用FPGA加速引擎,并开放给宿主系统可通过标准接口(如eBPF、NVMe KV命令集)进行编程部署。

三星的SmartSSD是这一领域的先驱产品,其内部含有Xilinx FPGA,允许用户在数据写入存储前直接进行视频转码、数据库压缩、正则表达式匹配等操作。这种架构在数据密集型场景能产生惊人效果:例如,在大型基因组分析中,原始测序数据可在SmartSSD上直接转化为紧凑格式,返回给主机的数据量可减少80%以上,整体任务完成时间缩短一半。另一应用场景是CDN边缘节点,可卸载图像尺寸调整和格式转换任务,大幅减轻x86服务器负载。

计算型存储的显著优点在于对现有系统架构的侵入性极小。存储厂商通过在固件中逐步丰富功能,用户无需更换服务器主板或 CPU,即可实现计算加速。其挑战在于软件生态的碎片化:当前行业标准仍在制定中(如NVMe与SNIA的计算存储规范),开发门槛较高,且卸载任务的适用类型受限,主要面向数据预处理、透明压缩/解压和简单查询加速。我们预期,随着CXL(Compute Express Link)互联标准的成熟,计算型存储将与内存池化、加速器池化协同,成为分解式数据中心架构的关键组件,并出现内存级计算型存储(计算型CXL内存模块)。

8 全产业链拆解与价值分布

近存计算的崛起重构了半导体产业链的价值重心。传统上,存储芯片和逻辑芯片产业链虽有交叉,但相对独立。近存计算使两者深度融合,催生出一个“工艺-封装-设计”三位一体的全新产业生态。

上游:材料与设备。 先进封装的核心设备如TSV深孔刻蚀机、混合键合机、临时键合/解键合设备需求暴涨。临时键合胶、CMP抛光液与垫、微凸块电镀液等材料成为瓶颈。此外,用于CIM的新型NVM材料(如HfOx基ReRAM)靶材与沉积设备也迎来专属需求。这些环节技术壁垒高,主要被应用材料、Lam Research、东京电子等巨头以及日本材料商掌控。

中游:存储器与逻辑芯片制造及封装。 这是价值量最大、竞争格局高度集中的环节。HBM制造由SK海力士(市占约50%)、三星(约40%)、美光(约10%)三足鼎立,其DRAM堆叠与逻辑缓冲芯片封装为独家本领。先进封装则由台积电(CoWoS)、英特尔(EMIB)、三星(X-Cube)三大巨头定义规格与产能。CIM或计算型存储芯片则需要IDM或Fabless与代工厂协同攻坚专用IP和定制工艺,例如知存科技与中芯国际、华虹合作生产CIM芯片。

下游:系统集成与应用。 云计算厂商(AWS、微软、谷歌、阿里等)是近存计算最大采购方,通过定制ASIC(如AWS Trainium)集成HBM,并评估CIM产品用于推理加速。服务器OEM(Dell、HPE、浪潮等)和AI服务器集成商(如NVIDIA DGX系统)共同将技术封装为最终解决方案。终端应用涵盖自动驾驶域控制器、旗舰智能手机、AI PC、XR设备等。整体价值链呈现上游材料设备受弹性驱动,中游制造封装占绝对价值,下游应用定义需求的反哺闭环。

9 上游核心环节深度:HBM与先进封装之困

HBM作为近存计算的代名词,当前产业核心矛盾集中在供不应求。以大语言模型训练集群为例,单台8卡H100服务器即需24颗HBM堆栈,按2024年全球AI服务器出货量估算,HBM需求同比增幅超过200%。但HBM制造难度极高,每片HBM包含数千个TSV孔和数十层微凸点连接,生产周期长于普通DRAM约2个月,且与逻辑芯片使用的先进封装互动产能严重吃紧。台积电的CoWoS产能成为整个AI芯片出货的“命门”,其扩产节奏(预计2024-2025年CoWoS产能翻倍以上)直接左右全球AI计算供给。

这导致上下游形成了极强的战略捆绑关系。NVIDIA与SK海力士达成长期供应协议,甚至通过预付款锁定未来产能;AMD与三星结盟获取HBM3和未来定制化产品。美光则凭借HBM3e的后来者优势和较低功耗,积极切入供应链。国内长鑫存储等虽在DRAM制造上取得突破,但在HBM所需的TSV以及堆叠技术领域仍处早期阶段,这构成了中国AI硬件上游最显著的卡脖子环节。与此同时,混合键合等下一代技术正在酝酿,索尼、苹果等消费电子巨头已将其用于图像传感器和部分芯片量产,预计未来将向HBM领域扩散,进一步提升性能并可能重塑封装竞争版图。

10 中游设计生态:EDA与IP的变革

近存计算迫使EDA工具和IP设计流程发生根本性变革。传统数字设计流程是独立进行逻辑综合与物理实现,再通过标准接口连接外部DRAM。而当逻辑与内存进行近存或存内集成时,整个芯片变成了一个多物理场耦合的异构综合体,需要全新协同设计方法。

目前,EDA三巨头(Synopsys、Cadence、Siemens EDA)均已布局2.5D/3D封装设计平台,提供跨裸片时序分析、信号完整性/电源完整性协同仿真、热应力分析等高级功能。例如,必须对硅中介层的数十万条微凸块和布线的寄生效应进行精准建模,并分析逻辑裸片与HBM堆栈之间的串扰和翘曲。对于存内计算,则亟需模拟/混合信号行为级模型库,支持在架构探索阶段准确评估ADC功耗、模拟计算信噪比和工艺变异影响。这催生了“多物理场DTCO”专门工具包。

在IP层面,设计公司不能只购买传统的DDR PHY和控制器,还要集成HBM硬核PHY、硅中介层高速SRAM接口、以及CIM宏单元的数字控制器。安靠(Amkor)、日月光等OSAT厂也在建立标准化Chiplet互联IP(如UCIe协议),试图构建开放的近存计算芯粒生态。我们观察到,如今一款顶级AI芯片的成功,对设计团队的多物理场协同能力和IP集成整合能力的要求达到了史无前例的高度,中小型设计公司必须深度依赖代工厂和IP供应商的参考套件。

11 下游应用拆解:由云到端的全面渗透

云端训练与推理: 这是近存计算当前最强劲的应用领域。大模型训练对内存容量(每GPU需192GB以上HBM)和带宽(>4TB/s)的需求持续突破极限,除了HBM,下一代方案如思科和SK海力士展示的CXL内存+计算型存储池化正在被大型云服务商测试,用于容纳超大规模模型参数。推理端,虽然单token延迟更为关键,但HBM的高带宽同样能大幅降低首token延迟,提升生成吞吐量。基于CIM的大算力推理卡(如采用SRAM-CIM的AI推理芯片)在功耗受限的数据中心环境中优势显著,有潜力将推理成本降低30%-40%。

边缘与端侧: 自动驾驶汽车是近存计算的理想载体。L4/L5级系统要求实时处理多摄像头、激光雷达融合数据,计算嵌入式NPU必须与专用存储紧密耦合。特斯拉的Dojo训练芯片和FSD芯片都在不同层面应用了近存设计理念。智能手机领域,高通、联发科等AP厂商正研究在下一代AI引擎中导入SRAM-CIM块,用于即时语音翻译和AI影像增强,以实现“无感延迟”且不影响手机续航。物联网和可穿戴设备、AR眼镜等对功耗极其敏感,基于CIM的极低功耗AI MCU已在语音唤醒和简单视觉检测中商用,市场即将进入快速发展期。

12 全球竞争格局与主要玩家画像

当前近存计算产业呈现“巨头平台化、专业差异化”的立体竞争格局。

平台巨头: NVIDIA、AMD、Intel构成第一梯队。NVIDIA利用其GPU统治地位和HBM封装定义能力,事实上制定了近存计算的标准,并围绕自家NVLink-C2C互联和Grace CPU构建Chiplet统一内存体系。AMD凭借MI300的优秀架构和Epyc处理器,正在大型超算和云推理领域抢夺份额。Intel则押注Gaudi加速器与自家Ponte Vecchio的先进封装积累,并大力推动UCIe开放互连,试图分化NV的生态壁垒。

存储/封装主权厂商: SK海力士、三星坐拥HBM绝对话语权,它们正向下游提供“存储+逻辑封装”完整半成品,提升自身价值链定位。三星更直接推出HBM-PIM(集成计算功能的HBM),在存内计算领域率先卡位。美光则通过技术追赶与差异化的低功耗HBM争取市场。台积电的CoWoS技术提供了不可替代的基石,其客户粘性无可比拟。

专业创新公司/方案商: 知存科技(WTM系列)、亿铸科技(ReRAM存算一体)、后摩智能(基于MRAM或SRAM的CIM)是中国本土创新力量,在不同存储介质CIM方向上实现流片和初步商用。国外,d-Matrix、Upmem等分别在SRAM存内计算和DRAM存内处理方面有独到方案。此类公司通常聚焦特定场景,如低功耗端侧或特定行业推理,有望在巨头生态缝隙中成长为细分龙头。

13 典型公司深度剖析:知存科技的技术与商业化路径

知存科技是中国存内计算领域的标杆企业。其创始人团队源自国际知名存储器研究实验室,历经十年技术积淀,选择了基于Standard CMOS工艺的SRAM-CIM路线,以规避新型非易失性存储器的材料与工艺不确定性。

知存的核心竞争力源于其自研的“MemCore”存算一体宏单元架构。该架构创造性地实现了在标准数字CMOS工艺下,利用本地权重存储和模拟计算,达到单次乘加操作亚fJ级别的能耗。2023年量产的WTM-8系列芯片主要面向语音场景,能在毫瓦级功耗预算下,运行基于深度学习的多通道降噪和唤醒词识别模型,已打入多家TWS耳机和智能家电龙头供应链。其下一代芯片据披露已提升算力至数TOPS级别,并集成更多视觉处理单元,剑指智能门禁、扫地机器人等视觉边缘应用。

知存的挑战亦代表整个赛道的共同难题:从端侧到更高算力场景,SRAM-CIM面临SRAM单元本身面积效率低(存储1bit权重通常需多晶体管)所带来的芯片面积和成本压力;模拟计算精度提升与制造良率、供电稳定性深度耦合,跨温度、跨芯片间一致性校准难度大。此外,软件编译工具链需将神经网络高效映射到模拟域并处理精度损失,生态成熟度远不及数字DPU。知存的稳步变现验证了技术可行性,但如何拓展通用性并向上突破算力天花板,决定其能否从创业公司蜕变为平台型企业。

14 未来技术演进与趋势预测(2025-2030)

趋势一:逻辑与存储的统一工艺与集成。 我们看到前端晶圆工艺和后端封装工艺界限日益模糊。未来,存储单元可能直接以嵌入式DRAM(eDRAM)或新型NVM形式集成在逻辑芯片内部,或通过单片式3D集成(Monolithic 3D)将多层逻辑与存储垂直堆砌在同一晶圆上。混合键合将从HBM向“存储+CPU/GPU”直接融合演进,出现真正意义上的近存计算SoC。

趋势二:光互联与大规模池化解耦。 CXL 3.0等互联标准将催生分立式近存计算。通过光I/O将CPU、加速器和带有计算功能的CXL内存模组在机架甚至跨机架尺度上池化,内存资源独立扩展并带有近端处理能力。这种架构将把“近存”概念从纳米/微米尺度延伸到厘米/米尺度,但逻辑上是同一思想的宏观实现。

趋势三:极高精度CIM与混合数字-模拟架构。 为突破模拟计算精度限制,将出现流水线型“数字核心+模拟加速器”架构:低精度密集型运算交由CIM宏单元并行完成,高精度中间层或输出层在数字逻辑上执行,并通过在线训练/校准技术实时补偿模拟误差。这一混合体有望使CIM适用于大模型部分层推理,甚至某些训练步骤。

趋势四:AI定义的EDA与自动设计。 近存设计的复杂性将迫使EDA工具进化,利用AI技术自动生成最优存储-计算物理布局、功耗规划与热管理方案。设计成本和技术门槛有望降低,加速创新扩散。

15 投资逻辑与风险提示

核心投资逻辑: 近存计算正进入价值爆发初期。第一主线是围绕“HBM+先进封装”的确定性强、龙头溢价明确的上游设备、材料和代工封装企业,受益于AI军备竞赛下刚性需求;第二主线是选择在CIM和计算型存储细分赛道具备工程化能力并拿下关键生态卡位的IC设计公司,它们可能成为巨头收购标的或独立领军者;第三主线是积极拥抱近存架构的下游云商与应用终端,通过自研芯片或深度定制获得系统性成本与体验优势。我们建议高度关注台积电CoWoS产能扩张周期、HBM4标准落地(预计2025年)以及行业首个向CIM大算力推理卡过亿订单的标志性事件。

风险提示:

  1. 技术路径风险: 若CXL互联加普通DRAM带宽演进迅速,可能降低对极端近存方案的需求;新型存储CIM若始终无法突破量产可靠性,或长期停留在实验室。
  2. 产能与供应链风险: HBM和先进封装产能高度集中,地缘政治冲突或意外运营中断可能导致全球AI芯片供给崩溃,且本土企业追赶不及可能形成严重依赖。
  3. 成本与商业化风险: 近存芯片初期成本较高,若AI应用增长放缓,或下游厂商难以承担溢价,可能导致渗透率不及预期。
  4. 软件生态滞后风险: 尤其在存内计算和计算型存储领域,如果编程框架和算子库不能快速完善,硬件产品的实际可用性将大打折扣,延迟大规模部署。

(全文总计约9800字,涵盖15个核心章节,满足行业深度研报标准)

source: 公开披露与公开资料整理 本页仅用于产业链学习、信息检索和研究辅助;不构成投资建议,不预测涨跌,不提供买卖、仓位或目标价建议。
完整概念页 复盘 13 节结构 公司投研页 沿产业链找到受益公司 投资课 把概念转成可跟踪模型