与前代产品AMD Alveo U55C计算加速卡相比,Alveo V80的逻辑密度至高翻倍、存储器带宽至高翻倍,且网络带宽可高至4倍,可以实现强大的计算集群,也不再需要DDR4或其他外部芯片,从而优化了卡、服务器数量以及机架空间。

对于“大型数据集和内存密集型工作负载”处理来说,最佳性能不仅取决于原始计算能力,还取决于高存储器和网络接口带宽。

那么,什么是“大型数据集和内存密集型工作负载”呢?目前来看,主要是指高性能计算应用,包括基因组测序、分子动力学和传感器处理;网络安全领域的线速数据包检测和AI支持的异常检测;金融科技应用,包括策略回测、期权定价以及金融建模与仿真;AI计算领域,包括推荐引擎和大语言模型等等。

AMD自适应和嵌入式计算事业部(AECG)高级产品线经理Shyam Chander日前在Alveo™ V80计算加速卡发布会上,用下图对“大数据集工作负载通常受限于内存和网络访问”进行了形象的比喻。可以看到,在传统处理器架构中,CPU+FPGA和PCIe的带宽远高于DDR内存和网络接口可以提供的带宽,导致无论是内存还是网络,都会出现瓶颈。

大规模加速计算密集型内存受限工作负载

大型数据集和内存密集型工作负载打造

Alveo™ V80计算加速卡是AMD提供的破局之道。该卡采用全高、3/4长(FH¾L)尺寸规格,由AMD Versal™ HBM自适应SoC提供支持,具备2,600,000个LUT逻辑单元的FPGA架构、10,848个DSP计算逻辑片以及820GB/s的存储器带宽,专为具有大型数据集的内存受限型应用而设计。此外,V80还包括一个32GB的DDR4 DIMM扩展插槽,并支持PCle Gen5接口,64G传输速率是第四代的2倍。整卡功率300W,采用被动散热,总热设计功耗TDP则取决于器件和服务器。

与前代产品AMD Alveo U55C计算加速卡相比,Alveo V80的逻辑密度至高翻倍、存储器带宽至高翻倍,且网络带宽可高至4倍,可以实现强大的计算集群,也不再需要DDR4或其他外部芯片,从而优化了卡、服务器数量以及机架空间。

了解加速卡的人士应该比较清楚,通常情况下使用加速卡时都需要和本地CPU进行连接,但这会限制加速卡的数量。而如果采用类似V80这样的网络附接加速卡,相较于传统加速器,能够在以下四方面带来优势:低时延处理传入的网络数据、避开至加速器的瓶颈、消除分立式网络接口卡、并实现每服务器的卡数和计算密度最大化。

如果映射到架构层面,这其实就是CPU/GPU拥有的传统架构和自适应计算拥有的灵活应变架构之间的不同。“传统架构是固定的缓存层次结构,用于数据的读写和输入,在这个过程中不规则的访问模式会引起潜在的低效率。”Shyam Chander指出,灵活应变的存储器层次架构是在计算附近分配内存,实现降低延迟和低功耗,而且可以灵活适应自定义的数据设计和数据建议。

从“射电天文天线阵列”到“金融建模”

联邦科学与工业研究组织(CSIRO )是澳大利亚的国立研究组织,其参与建造了世界上最大的射电天文学天线阵列,该天线阵列目前包含420张Alveo U55C加速器卡用于处理无线电波,以研究早期宇宙并探索星系演化。

CSIRO计划借助Alveo V80加速卡缩减占板面积与成本,并将所需加速卡的数量精简多达66%,同时应对来自望远镜131,000个天线的新信号处理任务。考虑到卡、服务器、机架空间和功耗的潜在减少,每卡算力的跃升预计可带来至高20%总拥有成本(TCO)下降。

下图呈现了总拥有成本降低的估算情况——左侧是420张AMD Alveo U55C加速卡,需要21台服务器,每年约是520千瓦时;右侧是140张AMD Alveo V80加速卡,服务器数量缩减为14台,每年大概是236千瓦时。加速器数量减少至高66%,服务器减少至高33%,功耗降低至高55%,总拥有成本也降低至高21%。

AMD Alveo V80加速卡实现的预估传感器处理和TCO节省

另外一个用例来自压缩与数据分析功能的服务器存储节点,主要功能就是利用FPGA架构和AMD压缩IP可扩展存储节点,并可解压缩,查询加速等。从总拥有成本的角度来分析,比如10Pb数据存储,没有压缩时需要55台服务器,1303个SSD驱动器,每年约427千瓦时的功耗。如果进行压缩,同样是10Pb数据只需要21台服务器,504个SSD驱动器,每年能耗约233千瓦时,使用42张AMD AlveoTM V80卡进行压缩,总拥有成本三年以上至高可以达到56%的降低,而且服务器的数量、服务器成本以及功耗也都有非常显著的降低。

金融科技领域的金融建模和算法交易,是现在很多企业趋之若鹜的一种用例。简单而言,用户在建模、仿真与回测的用例场景中,主要依靠FPGA架构和DSP用于密集计算,HBM用于大数据集、历史定价数据。而在低时延算法交易中,752Mb的RAM用于定价数据、交易记录,HBM则用于订单信息。

一切为了简化开发

Alveo V80加速卡经由Alveo Versal示例设计(AVED)完全可为传统硬件开发人员使用,现已在GitHub上提供。AVED利用传统FPGA和RTL流程简化了硬件启动,并且基于常见的Vivado工具流程。示例设计采用在AMD Versal自适应SoC上实现并专门针对Alveo V80加速器卡的预构建子系统,提供了高效的起点。

在系统层面,Alveo V80计算加速卡简化了系统集成并提供了快速的量产路径。通过使用预先验证的部署卡,设计团队可以避开PCB集成、库存管理和产品生命周期管理任务。 

总体而言,与其它类型的加速卡相比,Alveo系列主要针对内联网络、实时处理类型的应用,低时延、灵活应变、各个节点的可扩展性是主要诉求,FPGA的自适应SoC就是极好的解决方案,用户可以像面对乐高玩具一样,对非常丰富的存储器架构资源进行自定义拼装和使用。

责编:Lefeng.shao
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
在金融行业的高频交易中,每一纳秒都至关重要,会导致从盈利几百万美元到巨额亏损之间的差别。正是在这样的背景下,AMD推出了其最新的金融科技加速卡——Alveo™ UL3422。这款加速卡不仅满足了金融机构对高性能和低时延的迫切需求,还以其独特的优势引领着金融交易的新时代。
TI最近刚刚发布了新款PLD(可编程逻辑)产品系列,据说不需要编程知识,就能在十分钟内完成设计、仿真和配置...
Altera的首席执行官Sandra Rivera明确表示,英特尔没有改变其既定计划,即在2026年推动Altera完成首次公开募股(IPO)并出售部分在Altera的持股。
以市值860亿美元计算,英特尔已跌出全球十大芯片制造商之列。它是今年费城芯片指数中表现第二差的公司……
《纽约时报》近日报道称,尽管美国对俄罗斯实施了严格的芯片出口限制,但俄罗斯仍在其导弹系统中大量使用来自 AMD、德州仪器、美光和英特尔等美国公司的芯片。
AMD官宣AMD 总裁 Victor Peng即将退休,将于 2024 年 8 月 30 日退休。在此期间,Victor Peng继续担任 AMD 执行团队的顾问,并支持过渡,直至退休。
为了更直观地了解FinFET到GAAFET架构世代的差异,本文利用高倍率的电子显微镜影像进行深入的探讨与分析,观察其于结构微观层面上的特征...
汽车技术领域正处于关键的转折点,其未来依托于动态且适应性强的系统,并可通过软件不断提升驾驶体验。
连接标准联盟很高兴宣布 Matter 1.4 现已正式发布,可供设备制造商和生态平台开发应用。这次更新是Matter生态系统迈出的重要一步。Matter 1.4带来了一系列增强功能......
根植雄厚研发实力及物联网领域的深耕实践,汇顶科技面向新兴车载互联应用全力进击。旗下首款高可靠性、高性能车规级低功耗蓝牙SoC——GR5405,已成功通过AEC-Q100 Grade 2认证。
据36氪报道,保时捷负责采购的执行董事傅伦轲(Barbara Frenkel)向其透露,“我正在与电池、ADAS、互联、娱乐系统等方向的中国供应商接触,希望建立新的合作。”今年前三季度,保时捷在中国市
国芯网[原:中国半导体论坛] 振兴国产半导体产业!   不拘中国、放眼世界!关注世界半导体论坛↓↓↓11月12日消息,据路透社看到的草案,日本政府计划提出一个耗资 10 万亿日元的计划,在“数年”时间
互联网与科技企业每日重点资讯文 | 苏丁巨头动向歌尔股份被曝成为苹果2026年两款新品供应商天风国际分析师郭明錤爆料称,苹果将首次进军智能家居IP Camera(网络摄像头)市场,计划2026年量产,
全新产品几乎适用于任何应用,大幅减少元件数量、BOM成本和占板空间   瑞萨电子今日宣布,推出全新AnalogPAK™ IC系列,其中包括低功耗——SLG47001/
东芝电子今日宣布,最新开发出一款用于车载牵引逆变器[1]的裸片[2]1200 V碳化硅(SiC)MOSFET“X5M007E120”,其创新的结构可实现低导通电阻和高可靠性。X5M007E120现已开
由前苹果和英特尔等资深人士共同创立的硅谷人工智能芯片初创公司Tenstorrent,近日宣布与日本政府达成一项重要协议。根据协议,Tenstorrent将在未来五年内,于其美国办公室为日本培训多达20
11月12日,百度创始人李彦宏在百度世界2024大会上表示,智能体是AI应用最主流的形态,即将迎来爆发点,这里是李彦宏演讲完整视频。●付费专栏文章小白自媒体赚钱,年入十万不是梦:专栏介绍 丨小白自媒体
随着铜箔行业上市公司2024年度三季报的陆续发布,整体行业呈现出“增收不增利”的局面,财报数据如表1所示。表1 铜箔上市公司2024年前三季度财报数据面对上述现实,中国电子材料行业协会电子铜箔材料分会
国芯网[原:中国半导体论坛] 振兴国产半导体产业!   不拘中国、放眼世界!关注世界半导体论坛↓↓↓11月12日消息,据台媒报道,继台积电宣布对中国大陆AI芯片企业暂停7nm及以下先进制程代工服务后,