AI技术使存储和内存开始与系统架构进行更紧密的集成和优化;其次,能效成为了设计时考虑的关键因素之一。

众所周知,随着AI技术的发展以及普及,GPU和加速器早已成为AI技术背后的重要支柱,但相比之下,存储器支持AI的重要性则较少受到关注。

过去,存储和内存的发展相对独立,主要聚焦于提升各自的容量。然而,随着AI技术的普及,这一局面发生了变化。

日前,美光副总裁暨客户端存储事业部总经理Prasad Alluri在接受电子工程专辑分析师采访时指出,AI技术使存储和内存开始与系统架构进行更紧密的集成和优化;其次,能效成为了设计时考虑的关键因素之一。

存储和内存领域重要的转折点

人工智能(AI)是当代发展最强大的推动力,它正在加速全社会的进步。Prasad Alluri表示:“在我的职业经历中,AI的崛起可能是我见证过的最重大的变化之一,其影响力仅逊于从硬盘驱动器(HDD)到固态硬盘(SSD)的转变,这在存储和内存领域标志着一个重要的转折点。”

随着AI应用的广泛普及和新模型的不断涌现,它们对计算、内存和存储的需求日益增长。

为了满足AI所需的计算能力,数据必须尽可能靠近GPU,这就需要大量的内存支持。同时,为了支持这种内存需求,强大的存储解决方案是必不可少的。

从容量增长的角度来看,AI正在推动数据中心领域实现显著的容量增长,超越了其他许多领域。

Prasad Alluri认为,在分析AI基础设施对数据中心存储的影响时,可以特别关注AI专用的数据中心,并将其存储需求划分为两大类:一是用于模型训练的海量数据存储,二是服务于训练过程的高性能存储。

首先,对于模型训练所需的海量数据存储,这里需要一个庞大的数据池,通常被称为“数据湖”。以GPT-4为例,它在训练过程中大约利用了互联网数据总量的四分之一,这突出显示了大规模转换器模型对数据的庞大需求。

因此,这样的“数据湖”必须具备高效、经济地处理和存储大量数据的能力。为了满足这些要求,传统的大容量硬盘驱动器已不再适用,取而代之的是大容量的固态硬盘(SSD),如美光提供的6500 ION系列,该产品专为应对大容量存储挑战而设计,不仅能减少物理空间占用,还能有效降低能耗,提高能效。

其次,是直接支持训练过程的高性能存储。这部分存储位于接近GPU的位置,主要负责将“数据湖”中的数据快速传输至GPU内存中,以加速模型训练。这一环节的关键在于设备的原始性能,特别是随机访问能力。

据Prasad Alluri介绍,美光9550 SSD就是针对这一需求设计的产品,它在随机读取性能上处于行业领先地位,可达到3,300 KIOPS的高读取速度,非常适合支持训练集群的需求。此外,这款SSD还具有出色的能效表现,在支持多种AI工作负载时表现出色,比如在使用大规模存储加速器(BaM)进行图神经网络(GNN)训练时,可以实现高达43%的SSD功耗下降,以及29%的整体系统能耗降低等显著优势。

40 TOPSNPU算力仅是起点,不代表AI PC的全部潜力

此前,微软为其AI PC产品Copilot+设定了基本的性能标准,包括至少40 TOPS的神经网络处理器(NPU)算力、至少16GB的内存和256GB的存储空间。但Prasad Alluri认为,这些仅是起点,并不代表AI PC的全部潜力。

Prasad Alluri:“要真正理解AI PC,我们应该关注其如何通过提升用户体验来增强生产力,比如通过翻译和图像编辑等任务。这些任务需要在设备上高效完成,而这种整体体验才是AI PC的核心,而非单纯的技术规格。”

为了满足这些需求,Prasad Alluri认为实际所需的内存容量应该远超最低标准。

Prasad Alluri指出,目前,大多数OEM厂商在设计AI PC时,已经配置了24GB至32GB的DRAM。

在存储方面,虽然OEM厂商提供的最低配置为512GB,但Prasad Alluri认为对于AI工作负载来说,1TB的存储空间更为理想。这不仅关乎存储容量,还包括功耗效率和性能。目标是在不增加功耗的情况下,尽可能提高数据从存储到内存的传输速率。

值得一提的是,进一步降低能效是内存和存储设计中的关键因素,美光已经采取了多项措施来应对这一挑战。

据Prasad Alluri介绍,首先,美光加快了LPDDR5X在AI PC中的应用,其性能比同类SODIMM产品提升了约1.5倍。此外,还为AI个人电脑设计了一种新型内存模块——LPCAMM2。

与传统SODIMM产品相比,LPCAMM2在性能提升1.5倍的同时,功耗降低了58%,体积减少了64%。这款新产品主要围绕提升性能、降低功耗和减小体积三大目标设计。LPCAMM2将两个SODIMM的功能集成到一个DIMM中,显著提升了电源效率和性能。

汽车产业面临特有挑战

相较于移动设备和个人电脑领域,汽车产业面临着一系列独特的挑战。Prasad Alluri提到,汽车的设计需确保能够在长达十年或更长的时间内稳定可靠地运行。同时,汽车还必须能够应对极端的环境条件,例如强烈的振动、尘土飞扬的道路等。这些特殊的要求对汽车内存和存储解决方案的设计提出了严格的标准。

随着自动驾驶技术的不断发展,美光科技推出了专为汽车应用优化的技术,如LPDDR5X内存和UFS 4.0技术。LPDDR5X内存着重于提升能耗效率,而UFS 4.0技术的数据传输速率几乎达到了UFS 3.1的两倍,极大地促进了汽车应用的性能提升。

针对新一代汽车架构的需求,美光还特别开发了4150AT SSD,这是一款四端口的SSD,旨在支持汽车行业的区域集中架构和集中决策的趋势。4150AT SSD集成了虚拟化技术,包括单根I/O虚拟化(SR-IOV)和多命名空间(Multi-Namespace)两种形式。其中,多命名空间功能允许用户根据不同的需求,将存储空间划分为SLC(单层单元)、TLC(三层单元)及高耐久性SLC区域,从而实现更灵活、高效的存储管理。

借助虚拟化技术,4150AT SSD可以如同多个独立的SSD般运作,完美匹配具有集中控制特性的区域架构。Prasad Alluri还透露,尽管汽车行业的认证流程较长,目前尚不便公开具体的合作细节,但美光正与多家顶级汽车制造商紧密合作,共同推进NVMe 2.0功能的虚拟化SSD在汽车领域的首次应用。这标志着美光在推动汽车技术进步方面迈出了重要的一步。

责编:Demi
阅读全文,请先
您可能感兴趣
HBM4将用于特斯拉正在开发的AI数据中心及其自动驾驶汽车。其中,特斯拉采购HBM4芯片将用于强化其超级电脑Dojo的性能。
Rambus HBM4的控制器IP提供了32个独立通道的接口,总数据宽度可达2048位。基于这一数据宽度,当数据速率为6.4Gbps时,HBM4的总内存吞吐量将比HBM3高出两倍以上,达到1.64TB/s。与Rambus HBM3E控制器一样,HBM4内存控制器IP也是一个模块化、高度可配置的解决方案。
SK海力士NAND闪存解决方案子公司Solidigm13日宣布推出现有最大的122TB(太字节)容量NAND闪存解决方案,并基于QLC的eSSD(企业级固态硬盘)新产品“D5-P5336”。
今天我又把同事的七彩虹战斧GeForce RTX 4060 8GB GDDR6显卡给拆了。发现它虽然用料不怎么样,但性能却非常地好。
三星电子的晶圆代工业务亏损重要原因之一是错失HBM风口和尖端制程良率问题。作为全球最大的存储芯片制造商,三星电子巅峰时期曾独占全球45%以上的内存市场。然而,近两年来,三星电子在先进制程芯片及AI芯片领域的进展缓慢。
今天我们来拆解一款顶配游戏显卡——撼与科技Intel Arc A770 TITAN OC 16GB。这款显卡在2022年英特尔重回独立显卡市场后,迅速成为众多数码爱好者的焦点。
自托管加密钱包是一种数字工具,它让用户可以完全掌控加密货币的私钥,特别是像比特币这样的数字资产。对于初次接触加密货币的用户来说,了解如何购买比特币是使用自托管钱包的第一步......
12月11-12日,“上海集成电路2024年度产业发展论坛暨第三十届集成电路设计业展览会”(ICCAD-Expo 2024)将在上海世博展览馆隆重举行。
NS800RT系列实时控制MCU凭借更加高效、功能更强大的实时控制能力和丰富的外设,使工程师能够在光伏/储能逆变器、不间断电源、工业自动化、协作机器人、新能源汽车大/小三电、空调压缩机等系统中,实现皮秒级别的PWM控制,从而显著提升系统运行精度和效率。
芯片超人现有1600平米芯片智能仓储基地,现货库存型号1000+,品牌高达100种,5000万颗现货库存芯片,总重量10吨,库存价值高达1亿+。同时,芯片超人在深圳设有独立实验室,每颗物料均安排QC质
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11 月 20 日,蔚来正式将第三品牌命名为 “firefly萤火虫”,并宣布首款产品与品牌同名。firefly萤火虫品牌将于 12 月
★欢迎星标 果壳硬科技★“撒尿!撒尿!”旁边的两个小孩不断调整口音,力求最标准地喊出“撒尿”两个字。终于,桌上的机器狗缓缓抬起一只后腿,做出了狗狗撒尿的动作。与机器狗同出一家的桌面机器猫,同样能执行“
三星的翻盖式摺叠手机 Galaxy Z Flip 系列近年频繁出现在韩剧中,凭借小巧可爱的外型掳获不少女性消费者喜爱!如今市场传出好消息,三星可能会在明年的Galaxy Z Flip 7 加码平价款机
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11月19日,国家发展改革委政策研究室副主任、委新闻发言人李超在11月新闻发布会上透露,将研究提出未来继续加大“两新”政策支持力度、扩大
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11月20日,据路透社报道,在大众汽车计划削减超过170亿欧元的成本之际,德国大众汽车工会周三威胁要进一步升级与大众汽车的争端。IG M
文|萝吉所谓“哪里有流量,哪里就有生意”,这句不知出自哪个圈子的话,已经在各行各业被奉为圭臬,并在过去半年里,彻底席卷了整个汽车圈。从开抖音账号搞网红路线的基层销售,到时不时来场直播介绍产品的高层大佬
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11月20日,据“吉利汽车集团”官方发布消息,哈尔滨第9届亚冬会首批官方指定用车——吉利醇氢电混汽车发车仪式在吉利晋中基地举行,350辆
面板价格观察--11月下旬版昨日(11月20日),TrendForce集邦咨询公布了11月下旬面板报价,TrendForce集邦咨询表示:2024年11月下旬,电视、笔记本面板价格保持稳定;显示器面板
11 月 21 日消息,努比亚 Z70 Ultra 旗舰手机今日正式发布,延续了屏下前摄“真全面屏”设计,定价 4599 元起,现已开启预售,11 月 25 日上午 10 点正式开售。12GB + 2