在连线观赏、直播购物、在线拍卖和社交流媒体等下一代交互式应用场景中,每个人都是主播,他们既是数据源也是接收器,要求对数据的处理更加贴近用户和网络边缘,使得支持传统直播与点播广播的基础设施面临极大挑战

近些年来,视频直播迎来飞速增长。Bluewave Consulting and Research的数据显示,全球视频流总市值将有望从2021年的610亿美元增长至2028年的2130亿美元,年均复合增长率(CAGR)高达20%。其中,主打视频直播的YouTube Live、Facebook Live和Twitch用户规模,远远超过其他视频点播和音频平台用户的数量,视频占据了网络流量的70%以上。

但AMD视频战略与市场开发主管Sean Gardner日前在接受《电子工程专辑》采访时指出,传统的广播流媒体主要采取一对多模式,由软件和CPU提供支持。由于视频流数量比较少,时延相对可控,现有基础设施支持传统直播与点播广播是可行的。然而在面对下一代交互式模式(即多对多模式)时,由于连线观赏、直播购物、在线拍卖和社交流媒体等应用场景中的每个人都是主播,他们既是数据源也是接收器,就要求对数据的处理更加贴近用户和网络边缘。

AMD视频战略与市场开发主管Sean Gardner

这样一来,之前通过云集中获得经济效益的传统模式将不复存在,实时、交互式的新型流媒体应用场景要求低时延和大容量,基础设施部署模式需要得到彻底改变才能够适应这些变化带来的成本压力,所有这些都在不断呼唤新一代实时、交互式流媒体解决方案的到来。

揭开全新媒体加速器卡的神秘面纱

为此,AMD日前推出了全新媒体加速器卡Alveo MA35D。其中,MA代表媒体加速器(Media Accelerator),35代表Alveo U30后的新一代产品,D表示两个(Dual)5纳米基于ASIC的、支持AV1压缩标准的视频处理单元(VPU),专为推动大规模直播互动流媒体服务新时代而打造。

先简单回顾一下Alveo U30加速卡特性,该卡基于Zynq UltraScale+ MPSoC打造,这是一种功耗优化型的全可编程片上系统,集成了用于超高清视频的视频编解码器和图形引擎,可同时支持H.264和HEVC(H.265)编解码器,并且每卡能传输16个1080p30通道。赛灵思方面称,在视频质量方面,Alveo U30加速卡的转码效果不亚于NVIDIA T4,还可以提供更高的密度,系统功耗不到T4的20%。未来,U30高密度PCIe解决方案或将支持机器学习和AI。

2020年,面向电子竞技与游戏直播平台、社交与视频会议、远程直播教育、远程医疗和视频直播等领域,AMD还推出了基于Alveo U30的高通道密度视频转码一体机和基于Alveo U50的超低比特率视频转码一体机,两者均基于AMD实时服务器(RT Server)参考架构,并在当时被称之为面向视频直播的“双管齐下”策略。

与Alveo U30相比,Alveo MA35D的通道密度提高4倍、功耗降低3倍、时延降低4倍、每通道成本最多降低2倍;每卡可以每流1瓦的功率提供多达32路1080p60转码密度,其4K编码时延最低8毫秒,仅为常规处理时间(16毫秒)的一半,22TOPS AI算力(INT8)性能可以支持非常多的创新应用场景,1595美元的建议零售价也非常有吸引力。

“如何通过高通道密度助力降低资本支出(CAPEX)与运营支出(OPEX),是我们在Alveo MA35D设计之初就重点考虑的问题。”Sean Gardner介绍说,客户在评估效率时主要关注每通道成本、每通道面积和每通道功耗三大指标,而配备8张Alveo MA35D卡的1U机架式服务器可提供256个通道,以实现每服务器、每机架或每数据中心转码密度最大化。数据显示,在每通道成本50美元,功耗1瓦的条件下,得益于先进编码解码器的使用,每通道比特率降低了52%。 

新的专用视频处理单元(VPU)是Alveo MA35D的核心组件。如下图所示,四个独立的支持AV1压缩标准的编码器(MP)单元模块被部署在芯片四周,通过在视频处理单元上执行所有视频处理功能,可以最大限度减少CPU和加速器之间的数据迁移,进而降低整体时延并实现通道密度最大化,达到每卡高达32路1080p60、8路4Kp60或4 路 8Kp30的转码密度。

考虑到带宽的消耗对于流媒体客户来说是非常大的一项运营开支,AMD此番也针对主流H.264和H.265编解码器提供了超低时延支持,并配备下一代AV1转码器引擎,每通道比特率降低了52%,以节省带宽。

此外,为了能以更高的效率把动态内容传导给编码器,Alveo MA35D加速器还集成了人工智能(AI)处理器和专用视频质量引擎,能够以更低的带宽提升体验质量。AI处理器会逐帧评估内容并动态调整编码器设置,以提高感知视觉质量,同时最大限度降低比特率。优化技术则包括用于文本和面部分辨率的感兴趣区域(ROI)编码、用于纠正剧烈运动和复杂场景的伪影检测,以及用于比特率优化预测洞察的内容感知编码。

但是,人工智能并不完美,所以在进行动态调整时难免会出现一些不准确,或者是判断失误的情况。为此,Alveo MA35D中还引入了VQ分析IP模块,据称,该IP模块可在人工智能进行动态调整和变化的过程中形成反馈环,以确保所做出的决策是正确的。

“通过VQ分析,我们可以确保每一帧视频的质量,因为一旦出现错误就可以得到及时调整。尽管类似的方案中已经在传统模式中得以应用,但在这种实时、低时延的应用场景中实现还并不多见。“Sean Gardner说。

在做视频处理的时候,能够确保成本效益固然重要,但是最重要的是要能够使用这一技术。该平台可通过AMD媒体加速软件开发套件(SDK)访问,支持广泛使用的FFmpeg和Gstreamer视频框架,易于开发。如果某些客户拥有自己的框架,也可以与Alveo MA35D媒体加速器API进行接口连接。

Sean Gardner不认为Alveo MA35D会与AMD CPU/GPU形成竞争关系,“它们各有所长,效率非常高,彼此之间互补性极强。“ 例如CPU可以提供非常高性能的压缩,但如果用CPU处理几百万条流视频,经济性就很差。同理,如果对图像呈现有极高要求的应用场景,GPU显然会是更好的选择;Alveo MA35D更适合在低流媒体功耗、低时延、高质量的编码领域大展身手。

责编:Lefeng.shao
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
莱迪思在最近的开发者大会上发布了最新的Nexus 2平台和对应的小型FPGA产品。这次我们有机会看看相比竞品,Nexus 2是怎么做到低功耗和高性能的...
莱迪思(Lattice)正在考虑对英特尔旗下的FPGA业务Altera发起收购要约,对于国产FPGA行业而言,这一消息无疑带来了新的挑战和机遇。尽管在技术实力、产品性能及市场份额等方面与国际巨头尚有一定差距,但近年来国产FPGA的发展势头不容小觑……
继今年4月AMD宣布推出第二代Versal AI Edge系列和Versal Prime系列之后,日前,该公司又宣布推出第二代Versal Premium系列,使得第二代Versal系列的版图更趋完整。
在金融行业的高频交易中,每一纳秒都至关重要,会导致从盈利几百万美元到巨额亏损之间的差别。正是在这样的背景下,AMD推出了其最新的金融科技加速卡——Alveo™ UL3422。这款加速卡不仅满足了金融机构对高性能和低时延的迫切需求,还以其独特的优势引领着金融交易的新时代。
中国市场对于Lattice而言不仅是至关重要的战略市场,更是其全球业务不可或缺的一部分。他提到,Lattice在中国的业务历史已超过30年,作为首批进入中国市场的半导体企业之一,Lattice已经建立了专门的本地团队,这些团队不仅深入理解并服务中国市场,还致力于为中国客户量身打造解决方案。
TI最近刚刚发布了新款PLD(可编程逻辑)产品系列,据说不需要编程知识,就能在十分钟内完成设计、仿真和配置...
目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
投身国产浪潮向上而行,英韧科技再获“中国芯”认可
来源:苏州工业园区12月17日,江苏路芯半导体技术有限公司掩膜版生产项目迎来重要进展——首批工艺设备机台成功搬入。路芯半导体自2023年成立以来,专注于半导体掩膜版的研发与生产,掌握130nm至28n
投资界传奇人物沃伦·巴菲特,一位94岁的亿万富翁,最近公开了他的遗嘱。其中透露了一个惊人的决定:他计划将自己99.5%的巨额财富捐赠给慈善机构,而只将0.5%留给自己的子女。这引起了大众对于巴菲特家庭
来源:观察者网12月18日消息,自12月2日美国发布新一轮对华芯片出口禁令以来,不断有知情人士向外媒透露拜登政府在卸任前将采取的下一步动作。美国《纽约时报》12月16日报道称,根据知情人士以及该报查阅
有博主基于曝光的信息绘制了iPhone 17系列渲染图,对比iPhone 16系列,17系列最大变化是采用横置相机模组,背部DECO为条形跑道设计,神似谷歌Pixel 9系列,这是iPhone六年来的
万物互联的时代浪潮中,以OLED为代表的新型显示技术,已成为人机交互、智能联结的重要端口。维信诺作为中国OLED赛道的先行者和引领者,凭借自主创新,实现了我国OLED技术的自立自强,成为中国新型显示产
“ 洞悉AI,未来触手可及。”整理 | 美股研究社在这个快速变化的时代,人工智能技术正以前所未有的速度发展,带来了广泛的机会。《AI日报》致力于挖掘和分析最新的AI概念股公司和市场趋势,为您提供深度的
扫描关注一起学嵌入式,一起学习,一起成长在嵌入式开发软件中查找和消除潜在的错误是一项艰巨的任务。通常需要英勇的努力和昂贵的工具才能从观察到的崩溃,死机或其他计划外的运行时行为追溯到根本原因。在最坏的情
在科技浪潮翻涌的硅谷,马克·扎克伯格不仅是“脸书”帝国的掌舵人,更是以其谦逊低调的形象,在公众心中树立了独特的领袖风范。然而,在镁光灯难以触及的私人领域,扎克伯格与39岁华裔妻子普莉希拉·陈的爱情故事
今天上午,联发科宣布新一代天玑芯片即将震撼登场,新品会在12月23日15点正式发布。据悉,这场发布会联发科将推出全新的天玑8400处理器,这颗芯片基于台积电4nm制程打造,采用Arm Cortex A
极越汽车闪崩,留下一地鸡毛,苦的是供应商和车主。很多人都在关心,下一个倒下的新能源汽车品牌,会是谁?我们都没有未卜先知的超能力,但可以借助数据管中窥豹。近日,有媒体统计了15家造车新势力的销量、盈亏情