整体来看,存储产业出现了分化的市场行情:一方面在多类消费电子需求疲弱背景下,多家NAND Flash厂商仍在减产,另一方面因AI服务器需求增加,与AI场景高算力需求匹配的HBM需求上升。然而,AI浪潮催化下的DRAM行情虽有好转迹象,但整个存储芯片产业似乎仍待实际需求支撑。

过去近两年来,受消费电子市场需求疲软等因素影响,存储芯片产业游进入库存过剩、订单减少、价格暴跌的“寒冬”。三星、美光、SK海力士、铠侠等存储芯片大厂纷纷减产、去库存,但市场行情是否筑底众说纷纭,整体产业回暖的迹象亦不明显。

然而,在生成式AI对算力需求的带动下,2023年初以来高带宽内存(HBM)在整个存储芯片产业中可谓“这边风景独好”。目前,三星、SK海力士、美光等存储芯片大厂均在布局与抢占这一细分市场利好。

与此同时,随着AI对内存速率提出更高的要求,HBM技术创新仍将持续不断演进。因此,相对整个存储芯片产业而言,HBM这一细分领域出现了产能和性能双提升的增长态势。

HBM增长势头强劲

HBM(High Bandwidth Memory)是一款新型的CPU/GPU内存芯片(即“RAM”),其实就是将很多个DDR芯片堆叠在一起后和GPU封装在一起,实现大容量、高位宽的DDR组合阵列,可被广泛应用于高性能计算、人工智能、图形处理和数据中心等领域。

整体来看,HBM具有超越一般芯片集成的RAM的特殊优势:一是高速、高带宽的特性使HBM非常适合用于GPU显存和HPC高性能计算、AI计算;二是由于采用了TSV和微凸块技术,HBM具备更好的内存功耗能效特性,相对于GDDR5存储器,HBM2的单引脚I/O带宽功耗比数值降低42%,更低的热负荷降低了冷却成本;三是在物理空间日益受限的数据中心环境中,HBM紧凑的体系结构也是其独特的优势。

今年初以来,ChatGPT突然爆火,带动了AI大模型的快速增长,使得具备高带宽和低功耗特性的HBM成为处理大规模数据和复杂计算任务的理想选择。据悉,2023年开年后,三星、SK海力士两家存储大厂HBM订单快速增加,价格也水涨船高,HBM3规格DRAM价格甚至上涨5倍。

过去数月里,HBM乘AI东风,市场关注度大幅上升。据悉,三星电子、SK海力士等韩国本土存储半导体企业正在推动HBM专用线的扩张。两家公司计划在2024年年底前投资超过2万亿韩元,使HBM生产线目前的产能增加一倍以上。SK海力士计划利用利川现有HBM生产基地的清州工厂的闲置空间。三星电子正在考虑扩大位于忠清南道天安市的HBM核心生产线。

另一大存储大厂美光也很早就嗅到AI应用商机,于2019年在中国台湾成立HBM部门。美光甚至表示,看好2022年至2025年HBM市场年复合成长率超50%。

当前,HBM市场呈现三足鼎立格局。TrendForce研究显示,2022年三大原厂HBM市占率分别为SK海力士占50%、三星约40%、美光约占10%。

从发展进程来看,2023-2024年将是AI建设爆发期,大量需求集中在AI训练芯片上,势必推升HBM使用量。预计2023年,HBM即便在原厂扩大产能的情况下,仍无法完全满足客户需求。从各原厂规划看,预计2024年HBM供给位元量将年增长105%。另据semiconductor-digest预测,到2031年,全球高带宽存储器市场预计将从2022年的2.93亿美元增长到34.34亿美元,在2023-2031年的预测期内复合年增长率为31.3%。

三星获英伟达HBM订单

在AI大模型热潮影响下,科技大厂接连布局AI大模型,掀起了AI大模型竞争之战,可以预见未来算力需求仍将大幅增长。目前,NVIDIA、AMD、Intel等高端AI芯片大多选择搭载HBM。而作为加速计算领导者,英伟达更是受益于ChatGPT引发AI大模型需求增长,今年以来股价累计涨幅已超过245%,目前(9月5日)市值已站上1.2万亿美元。

当前,在核心GPU(图像处理器)加速计算芯片供不应求的情形下,英伟达在加大GPU供应量的同时,也加速推出新一代算力更快的芯片——超级芯片GH200,以持续巩固AI大模型核心算力芯片供应商地位。

中信证券分析认为,目前英伟达数据中心加速卡销量仍主要以高端的A100/H100系列卡为主,其中台积电CoWoS环节产能为主要约束,考虑到封测设备的交货周期等因素,预计台积电CoWoS产能实质性改善至少应在2024Q2左右。

当然,除了CoWoS产能不足之外,HBM也是供不应求。目前,SK海力士是HBM3领域的全球领导者,迄今为止也是英伟达唯一为AI加速器提供HBM的供应商。有专家认为,HBM3是需高带宽的人工智能服务的理想选择。

然而,SK海力士一家远远难以满足英伟达对HBM的需求。据悉,英伟达计划到2024年出货最高200万颗H100。此前HBM供应商主要是SK海力士,但是产能也有限,如果英伟达不引入其他HBM供应商,那么要达成这一目标将变得相当困难。这势必迫使英伟达寻找更多的HBM供应商进行合作。

9月5日消息,据韩国媒体报导,三星电子已获得英伟达(NVIDIA)的高带宽内存(HBM)订单。据悉,三星的HBM已通过NVIDIA的第四次测试,也是最后一次品质测试。随后,两家公司已同意签订供应协议。根据该协议,双方的供货最早可能在10月启动。现在NVIDIA已经拥有SK Hynix和三星作为其HBM供应商,这使得AI GPU的产量能够提升。

花旗集团分析师也曾在一份报告中写道,三星电子将从第四季度开始供应HBM3新一代内存,经过优化配合人工智能加速器使用。未来,随着三星的加入,英伟达将在很大程度上缓解GPU供应不足的压力。

HBM技术不断演进

未来数年,HBM的发展“钱景”被存储大厂广受看好。而在当前高性能计算应用对内存速率提出更高要求的背景下,HBM技术将继续进行改进和创新。

从技术发展趋势看,HBM促使DRAM从传统2D加速走向立体3D,充分利用空间、缩小面积,契合半导体行业小型化、集成化的发展趋势。具体来看,增加堆叠层数、提高数据传输速度和密度,以及降低功耗和成本等方面的改进,将推动HBM技术的进一步发展。

目前,HBM内部的DRAM堆叠属于3D封装,而HBM与AI芯片的其他部分合封于Interposer上属于2.5D封装,是典型的Chiplet应用。

过去十年里,高带宽和高密度的HBM解决方案不断涌现,使得数据传输速度更快、容量更大,同时降低功耗和占用空间。据悉,HBM发展至今第四代性能不断突破。自2014年首款硅通孔HBM产品问世至今,HBM技术已经发展至第四代,分别是:HBM(第一代)、HBM2(第二代)、HBM2E(第三代)、HBM3(第四代),HBM芯片容量从1GB升级至24GB,带宽从128GB/s提升至819GB/s,数据传输速率也从1Gbps提高至6.4Gbps。

为了抢占未来HBM市场,目前各大存储大厂也在不断提升HBM技术性能。近日,美光中国台湾地区董事长卢东晖就表示,美光有多达65%的DRAM产品在中国台湾生产,继日本厂于2022年10月开始量产1β(1-beta)制程技术后,中国台湾现在也开始量产1-beta制程。同时,台日团队还研发新一代的1-gamma制程,是美光第1代采用极紫外光(EUV)的制程技术,将在2025年上半年先在台中厂量产。

而三星早在2022年10月召开的Samsung Foundry Forum 2022活动上,就对外公布了DRAM技术路线图。按照规划,三星将于2023年进入1bnm工艺阶段,芯片容量将达到24Gb(3GB)- 32Gb(4GB),原生速度将在6.4-7.2Gbp。

今年5月,三星已宣布量产12纳米级16Gb DDR5 DRAM,随后9月宣布采用12纳米(nm)级工艺技术,开发出其容量最大的32Gb DDR5 DRAM,全新12纳米级32Gb DDR5 DRAM计划于今年年底开始量产。

尽管各大储存厂商正不断加码HBM,但其技术创新仍需克服两大主要问题:一是HBM需要较高的工艺,进而大幅度提升了成本;二是大量DRAM堆叠,和GPU封装在一起,产生大量的热,如何散热是极大的挑战。

整体来看,存储产业出现了分化的市场行情:一方面在多类消费电子需求疲弱背景下,多家NAND Flash厂商仍在减产,另一方面因AI服务器需求增加,与AI场景高算力需求匹配的HBM需求上升。然而,AI浪潮催化下的DRAM行情虽有好转迹象,但整个存储芯片产业似乎仍待实际需求支撑。

责编:Jimmy.zhang
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
新款开发板售价仅为249美元,而上一代40 TOPS开发板售价为499美元,价格仅为上一代的一半。这使得Jetson Orin Nano Super成为“世界上最经济实惠的生成式AI计算机”,特别适合商业AI开发者、爱好者和学生使用。
通过机器学习技术,EDA工具可以获取更精确的模型来预测设计中存在的问题,如布线拥塞、信号干扰、热效应等,从而为用户提供更准确快速的指导,避免后期返工。
这一新规则可能会引起美国在世界各地的合作伙伴和盟友的重大担忧,以及一些国家的不满,担心美国会充当单方面仲裁者,决定谁可以获得对AI至关重要的先进芯片。
有鉴于电动汽车、自动驾驶和人工智能业务等未来增长潜力,以及在马斯克在当选总统特朗普政府中的“特殊地位”,多家分析机构认为,马斯克的财富未来还将进一步增长。
近日,曾因恶意攻击其实习公司字节跳动的模型训练集群,而被起诉索赔800万元人民币的前实习生田柯宇,获得了NeurIPS 2024的最佳论文奖。因其戏剧性和涉及道德及职业行为的问题,引起了广泛的关注和讨论。
面对企业危机,三星电子已提前启动年终人事调整,特别是半导体业务部门。此次人事变动旨在恢复公司的竞争力,涉及高层退休通知及管理层重组,预计将在未来一周内公布更多细节。
目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
投身国产浪潮向上而行,英韧科技再获“中国芯”认可
点击蓝字 关注我们安森美(onsemi)在2024年先后推出两款超强功率半导体模块新贵,IGBT模块系列——SPM31 IPM,QDual 3。值得注意的是,背后都提到采用了最新的FS7技术,主要性能
来源:观察者网12月18日消息,自12月2日美国发布新一轮对华芯片出口禁令以来,不断有知情人士向外媒透露拜登政府在卸任前将采取的下一步动作。美国《纽约时报》12月16日报道称,根据知情人士以及该报查阅
投资界传奇人物沃伦·巴菲特,一位94岁的亿万富翁,最近公开了他的遗嘱。其中透露了一个惊人的决定:他计划将自己99.5%的巨额财富捐赠给慈善机构,而只将0.5%留给自己的子女。这引起了大众对于巴菲特家庭
来源:IT之家12 月 18 日消息,LG Display 韩国当地时间今日宣布,已将自行开发的“AI 生产系统”投入到 OLED 生产线的日常运行之中,该系统可提升 LG Display 的 OLE
“ 洞悉AI,未来触手可及。”整理 | 美股研究社在这个快速变化的时代,人工智能技术正以前所未有的速度发展,带来了广泛的机会。《AI日报》致力于挖掘和分析最新的AI概念股公司和市场趋势,为您提供深度的
2024年度PlayStation游戏奖今日公布,《宇宙机器人》获得年度最佳PS5游戏,《使命召唤:黑色行动6》获得年度最佳PS4游戏。在这次评选中,《宇宙机器人》获得多个奖项,包括最佳艺术指导奖、最
 “ 担忧似乎为时过早。 ”作者 | RichardSaintvilus编译 | 华尔街大事件由于担心自动驾驶汽车可能取消中介服务,Uber ( NYSE: UBER ) 的股价在短短几周内从 202
近期,高科视像、新视通、江苏善行智能科技等企业持续扩充COB产能。插播:加入LED显示行业群,请加VX:hangjia188■ 高科视像:MLED新型显示面板生产项目(二期)招标12月18日,山西高科
在科技浪潮翻涌的硅谷,马克·扎克伯格不仅是“脸书”帝国的掌舵人,更是以其谦逊低调的形象,在公众心中树立了独特的领袖风范。然而,在镁光灯难以触及的私人领域,扎克伯格与39岁华裔妻子普莉希拉·陈的爱情故事
极越汽车闪崩,留下一地鸡毛,苦的是供应商和车主。很多人都在关心,下一个倒下的新能源汽车品牌,会是谁?我们都没有未卜先知的超能力,但可以借助数据管中窥豹。近日,有媒体统计了15家造车新势力的销量、盈亏情