深度丨巨头领跑,HBM3时代来临

原创 AI芯天下 2023-01-11 20:30

·聚焦:人工智能、芯片等行业

欢迎各位客官关注、转发






前言

随着数据的爆炸势增长,内存墙对于计算速度的影响愈发显现。


为了减小内存墙的影响,提升内存带宽一直是存储芯片聚焦的关键问题。


长期以来,内存行业的价值主张在很大程度上始终以系统级需求为导向,已经突破了系统性能的当前极限。


作者 | 方文
图片来源 |  网 络 



HBM契合半导体发展趋势


作为存储器市场的重要组成部分,DRAM技术不断地升级衍生。


DRAM从2D向3D技术发展,其中HBM是主要代表产品。


HBM(High Bandwidth Memory,高带宽内存)是一款新型的CPU/GPU 内存芯片。


其实就是将很多个DDR芯片堆叠在一起后和GPU封装在一起,实现大容量,高位宽的DDR组合阵列。


通过增加带宽,扩展内存容量,让更大的模型,更多的参数留在离核心计算更近的地方,从而减少内存和存储解决方案带来的延迟。


从技术角度看,HBM使DRAM从传统2D转变为立体3D,充分利用空间、缩小面积,契合半导体行业小型化、集成化的发展趋势。



JEDEC发布HBM3标准,带宽翻倍覆盖更多领域


在堆叠层数方面,新标准不仅支持4-Hi、8-Hi、12-Hi的硅通孔(TSV)堆栈,同时还为16-Hi方案实现做好准备。


每层8—32Gb的容量密度,可轻松支持4GB(8Gb 4-Hi)到64GB(32Gb 16-Hi)容量密度,预计初代产品将基于16Gb存储层。


为满足对高平台层级的可靠性、可用性与可维护性(简称RAS)需求,HBM3还支持基于符号的片上ECC、以及实时错误报告和透明度。


通过在主机接口端使用低摆幅(0.4V)信号和较低的工作电压(1.1V),进一步提升能效表现。


人工智能/机器学习、高性能计算、数据中心等应用市场兴起,催生高带宽内存HBM并推动着其向前走更新迭代。


市场调研机构Omdia预测,2025年HBM市场的总收入将达到25亿美元。



巨头率先抵达HBM3“战场”


去年10月,SK海力士宣布业界首次成功开发现有最佳规格的HBM3 DRAM。


这是SK海力士去年7月开始批量生产HBM2E DRAM后,时隔仅1年零3个月开发了HBM3。


SK海力士研发的HBM3可每秒处理819GB的数据,相当于可在一秒内传输163部全高清电影,与上一代HBM2E相比,速度提高了约78%;


内置ECC校检,可自身修复DRAM单元的数据的错误,产品可靠性大幅提高。


随着SK海力士成功开发HBM3,HBM开始挺进3.0时代,IP厂商亦已先行布局HBM3。



去年2月,三星电子发布其集成AI处理器新一代芯片HBM-PIM(processing-in-memory)。


可提供最高达1.2TFLOPS的嵌入式计算能力,从而使内存芯片本身能够执行通常由CPU、GPU、ASIC或FPGA处理的工作。


HBM-PIM芯片将AI引擎引入每个存储库,从而将处理操作转移到HBM本身。



去年7月,AMD正在研发代号为Genoa的下一代EPYC霄龙服务器处理器,采用Zen4架构。


这一处理器将首次配备HBM内存,目的是与英特尔下一代服务器CPU Sapphire Rapids竞争。


英特尔和AMD均将在CPU上采用HBM,这也意味着HBM的应用不再局限于显卡,其在服务器领域的应用将有望更加广泛。



去年10月,Synopsys宣布推出业界首个完整的HBM3IP解决方案,包括用于2.5D多芯片封装系统的控制器、PHY和验证IP。


Design Ware HBM3控制器与PHYIP基于经芯片验证过的HBM2EIP打造,而HBM3 PHYIP基于5nm制程打造,每个引脚的速率可达7200Mbps,内存带宽最高可提升至921GB/s。


去年8月,美国内存IP核供应商Rambus宣布推出其支持HBM3的内存接口子系统,内含完全集成的PHY和数字控制器。


数据传输速率达8.4Gbps,可提供超过1TB/s的带宽,是HBM2E内存子系统的两倍以上。


去年8月,英特尔在其架构日上介绍基于XeHPC微架构的全新数据中心GPU架构Ponte Vecchio。


Ponte Vecchio芯片由几个以单元显示的复杂设计构成,包括计算单元、Rambo单元、Xe链路单元以及包含高速HBM内存的基础单元。


英特尔也将HBM用在其下一代服务器CPU Sapphire Rapids上。


在内存方面,除了支持DDR5和英特尔@傲腾内存技术,还提供了一个产品版本,该版本在封装中集成了HBM技术。


可在HPC、AI、机器学习和内存数据分析工作负载中普遍存在的密集并行计算中实现高性能。


在 CES 2023 展会上,AMD披露了面向下一代数据中心的 APU 加速卡产品 Instinct MI300,是AMD投产的最大芯片。


这 9 颗小芯片采用有源设计,不仅可以在I/O瓦片之间实现通信,还可以实现与HBM3堆栈接口的内存控制器之间的通信,从而带来令人难以置信的数据吞吐量。



结尾:


随着技术标准化发展,该技术应用将会进一步扩大,扩展至用于下一代超级计算机和AI应用的HBM3,甚至用于设备上AI的移动存储器,以及用于数据中心的存储器模块。


HBM 存储器对于面向企业市场和最终消费者的产品来说是一个非常昂贵的选择。


随着人工智能和深度学习的不断发展,系统已经变得对带宽需求很大。


HBM处于系统和内存性能层级的顶端,是包括超级计算机、高性能计算、自动驾驶和机器学习等下一代应用无可争议的技术推动因素。


部分资料参考:IT之家:《AMD 造出最大芯片 Instinct MI300 加速卡》,半导体行业观察:《存储巨头竞逐HBM》,天极网:《JEDEC发布HBM3标准》,中国IDC圈:《HBM3内存:向更高的带宽突破》


本公众号所刊发稿件及图片来源于网络,仅用于交流使用,如有侵权请联系回复,我们收到信息后会在24小时内处理。



END


推荐阅读:


商务合作请加微信勾搭:

18948782064

请务必注明:

「姓名 + 公司 + 合作需求」


AI芯天下 聚焦人工智能,AI芯片,5G通讯等行业动态
评论
  • 彼得·德鲁克被誉为“现代管理学之父”,他的管理思想影响了无数企业和管理者。然而,关于他的书籍分类,一种流行的说法令人感到困惑:德鲁克一生写了39本书,其中15本是关于管理的,而其中“专门写工商企业或为企业管理者写的”只有两本——《为成果而管理》和《创新与企业家精神》。这样的表述广为流传,但深入探讨后却发现并不完全准确。让我们一起重新审视这一说法,解析其中的矛盾与根源,进而重新认识德鲁克的管理思想及其著作的真正价值。从《创新与企业家精神》看德鲁克的视角《创新与企业家精神》通常被认为是一本专为企业管
    优思学院 2025-01-06 12:03 124浏览
  • 村田是目前全球量产硅电容的领先企业,其在2016年收购了法国IPDiA头部硅电容器公司,并于2023年6月宣布投资约100亿日元将硅电容产能提升两倍。以下内容主要来自村田官网信息整理,村田高密度硅电容器采用半导体MOS工艺开发,并使用3D结构来大幅增加电极表面,因此在给定的占位面积内增加了静电容量。村田的硅技术以嵌入非结晶基板的单片结构为基础(单层MIM和多层MIM—MIM是指金属 / 绝缘体/ 金属) 村田硅电容采用先进3D拓扑结构在100um内,使开发的有效静电容量面积相当于80个
    知白 2025-01-07 15:02 76浏览
  • By Toradex 秦海1). 简介嵌入式平台设备基于Yocto Linux 在开发后期量产前期,为了安全以及提高启动速度等考虑,希望将 ARM 处理器平台的 Debug Console 输出关闭,本文就基于 NXP i.MX8MP ARM 处理器平台来演示相关流程。 本文所示例的平台来自于 Toradex Verdin i.MX8MP 嵌入式平台。  2. 准备a). Verdin i.MX8MP ARM核心版配合Dahlia载板并
    hai.qin_651820742 2025-01-07 14:52 51浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球无人机锂电池产值达到2457百万美元,2024-2030年期间年复合增长率CAGR为9.6%。 无人机锂电池是无人机动力系统中存储并释放能量的部分。无人机使用的动力电池,大多数是锂聚合物电池,相较其他电池,锂聚合物电池具有较高的能量密度,较长寿命,同时也具有良好的放电特性和安全性。 全球无人机锂电池核心厂商有宁德新能源科技、欣旺达、鹏辉能源、深圳格瑞普和EaglePicher等,前五大厂商占有全球
    GIRtina 2025-01-07 11:02 74浏览
  • 这篇内容主要讨论三个基本问题,硅电容是什么,为什么要使用硅电容,如何正确使用硅电容?1.  硅电容是什么首先我们需要了解电容是什么?物理学上电容的概念指的是给定电位差下自由电荷的储藏量,记为C,单位是F,指的是容纳电荷的能力,C=εS/d=ε0εrS/4πkd(真空)=Q/U。百度百科上电容器的概念指的是两个相互靠近的导体,中间夹一层不导电的绝缘介质。通过观察电容本身的定义公式中可以看到,在各个变量中比较能够改变的就是εr,S和d,也就是介质的介电常数,金属板有效相对面积以及距离。当前
    知白 2025-01-06 12:04 175浏览
  • 大模型的赋能是指利用大型机器学习模型(如深度学习模型)来增强或改进各种应用和服务。这种技术在许多领域都显示出了巨大的潜力,包括但不限于以下几个方面: 1. 企业服务:大模型可以用于构建智能客服系统、知识库问答系统等,提升企业的服务质量和运营效率。 2. 教育服务:在教育领域,大模型被应用于个性化学习、智能辅导、作业批改等,帮助教师减轻工作负担,提高教学质量。 3. 工业智能化:大模型有助于解决工业领域的复杂性和不确定性问题,尽管在认知能力方面尚未完全具备专家级的复杂决策能力。 4. 消费
    丙丁先生 2025-01-07 09:25 83浏览
  • 每日可见的315MHz和433MHz遥控模块,你能分清楚吗?众所周知,一套遥控设备主要由发射部分和接收部分组成,发射器可以将控制者的控制按键经过编码,调制到射频信号上面,然后经天线发射出无线信号。而接收器是将天线接收到的无线信号进行解码,从而得到与控制按键相对应的信号,然后再去控制相应的设备工作。当前,常见的遥控设备主要分为红外遥控与无线电遥控两大类,其主要区别为所采用的载波频率及其应用场景不一致。红外遥控设备所采用的射频信号频率一般为38kHz,通常应用在电视、投影仪等设备中;而无线电遥控设备
    华普微HOPERF 2025-01-06 15:29 132浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 87浏览
  • 在智能家居领域中,Wi-Fi、蓝牙、Zigbee、Thread与Z-Wave等无线通信协议是构建短距物联局域网的关键手段,它们常在实际应用中交叉运用,以满足智能家居生态系统多样化的功能需求。然而,这些协议之间并未遵循统一的互通标准,缺乏直接的互操作性,在进行组网时需要引入额外的网关作为“翻译桥梁”,极大地增加了系统的复杂性。 同时,Apple HomeKit、SamSung SmartThings、Amazon Alexa、Google Home等主流智能家居平台为了提升市占率与消费者
    华普微HOPERF 2025-01-06 17:23 146浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 104浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦