未来网络:SmartNIC/DPU技术

智能计算芯世界 2022-08-29 00:00

SmartNIC和主要用以快速联网、高效数据处理、加速数据传输,并能实现网络、存储和安全等功能卸载。SmartNIC 和 DPU 能够满足数据中心高效联网,处理和迁移数据以及功能卸载的需求,助力后摩尔定律时代数据中心和网络性能的持续改进,同时对运营商网络智能化转型、东数西算、新一代算力网络构建、云网边端融合具有促进作用。


本文参考自“未来网络:SmartNIC DPU技术白皮书”,介绍 SmartNIC/DPU 的特征和需求、硬件和编程架构、技术和产业发展趋势,提供应用场景和应用案例,介绍相关公司及产品、以及 SmartNIC/DPU 的测试技术,同时提出发展建议,以期促进SmartNIC/DPU 相关产业发展。


根据 IDC 数据显示,2020-2025 年全球产生或复制数据量以CAGR 23%保持增长,并预计每四个月对算力的需求就会翻一倍。海量数据增长、数据频繁交互以及各类应用激增带来的巨大流量增长,加速数据中心网络向更高性能和更高灵活性方向演进。数据中心网络打破传统端口速率十倍增长的十年代际演进周期,加速向 100 Gbps、200 Gbps、400 Gbps,甚至 800 Gbps、1.6 Tbps 发展。根据华为预测,未来十年通用算力将增长 10 倍,人工智能算力将增长 500 倍


智能网卡应运而生,一种可编程的智能网络适配器来卸载数据中心的网络工作负载,减轻 CPU 处理任务的负担,其发展历程可被划分为三个阶段:基础网卡、第一代智能网卡和第二代智能网卡


基础网卡(NIC)是将电脑接入局域网的设备,主要负责数据帧的封装、解封以及物理层电气信号的相应处理。网络协议栈中传输层、路由层等更高层的逻辑则由端系统的 CPU 负责,但随着 overlay 协议、OpenFlow、Open vSwitch(OVS)等虚拟交换技术的引入,网络数据平面复杂性急剧增加,使得 CPU 侧负载过重,基础网卡的固定流量处理功能逐渐无法满足需求。该阶段的网卡主要通过 DPDK 和 SR-IOV 等方式向虚拟机(VM)提供网络接入能力。


第一代智能网卡(Smart NIC)最早由 Netronome公司于 2016年提出,旨在实现基础网卡网络传输功能的同时灵活实现复杂网络数据平面功能。随后智能网卡的硬件卸载功能被不断完善,并逐渐发展为提供内置可编程、可配置的硬件加速引擎,通过将 OVS 功能从服务器 CPU 卸载到网卡,释放昂贵的 CPU 资源,并提供更好的可扩展性和更高的性能。


第二代智能网卡(现阶段的智能网卡),在具备第一代智能网卡基础功能的同时,实现了控制面的加速和数据面加速的增强,比较典型的有英伟达(Nvidia)的 DPU(Data Processing Unit)和英特尔(Intel)的 IPU(Infrastructure Processing Unit)。DPU 概念最早由 Fungible 于2018 年提出,2020 年 Nvidia 发布首款 DPU 产品,在支持网络处理、安全和存储功能的同时,实现网络虚拟化、硬件资源池化等基础设施层服务。


智能网卡目前在业界尚未形成统一定义,我们将其定义为一种以数据为中心构造的兼具硬化加速器和网络连接的可编程智能网络适配器,主要负责卸载、加速和隔离软件定义的网络、存储、安全和管理功能,最终实现数据中心性能、效率和安全能力的显著提高。智能网卡一般拥有以下特征:


  • 具有独立的计算单元,能完成特定的重组加速、安全加速等基础设施功能操作并提升应用性能;
  • 集成多核 CPU 和专用处理器核,能实现数据面和控制面卸载,同时满足多业务处理;
  • 具有高性能网络接口(如 50/100/200/400G 接口),能以线速解析、处理并有效地将数据传输到 GPU 和 CPU;
  • 具备灵活的可编程加速引擎,能为网络、存储、安全和虚拟化等提供高性能的定制化卸载,同时满足不同应用设计和开发需求;
  • 具有安全管理功能,支持硬件信任根、安全启动、安全固件升级等;配置高速 PCle,如 PCle  4.0/5.0,支持 PCle Root Complex 和 Endpoint 模式;
  • 具有片上内存控制能力,如集成 DDR/HBM。

智能网卡的优势包括

1)实现业务和基础设施操作分离,提高服务器和数据中心的效率和吞吐量,并降低长尾延迟;

2)实现各种基础设施操作卸载,提供软件定义和硬件加速的网络、存储、安全和管理等服务;

3)实现零信任安全保护,通过卸载控制平面完全隔离主机业务保证安全;

4)实现硬件可编程,为广泛应用程序提供定制化能力或重新组装以满足新要求。


SmartNIC/DPU需求和意义

(1)从行业的角度:随着万物互联时代的到来,家居、医疗、工业、交通等场景逐步向数字化转变,算力呈现指数级增长,芯片将成为突破算力瓶颈的关键。


(2)从技术的角度:智能网卡面临的挑战包括:

1)潜在的功耗和可编程复杂度高的问题,随着更多功能的集成,功耗、可编程性和复杂性会越来越高,同时将消耗大量资源来进行开发和调试,导致时间和资源成本越来越高;

2)面向多领域/多场景承载需求,需要大量处理引擎,使得软硬件解耦非常困难。因此,需要相关研究机构和产业链上下游的公司协同攻克智能网卡设计和制造中的关键技术,取得更好的成本、性能和适用范围的平衡。

(3)从用户的角度:全球数据量激增促使数据中心网络从“以计算为中心”转向“以数据为中心”,加速数据传输、提升用户体验,需要最小化后端请求的尾部延迟。网络带宽和连接数的剧增进一步推进算力需求爆炸式增长,而摩尔定律日趋极限,CPU 性能增长速度逐渐放缓。寻求更符合用户需求的计算芯片已成为业界共识。


(4)从场景的角度:智能网卡可以在网络功能卸载、存储功能卸载、安全功能卸载以及 5G MEC、人工智能、区块链、科学计算等诸多应用场景中发挥重要作用。


智能网卡为解决算力供需失衡问题而生,行业发展目标主要分为纵向深耕和横向扩展两个方面。


(1)根据具体的应用领域完成从研发到商业化落地,对智能网卡行业进行纵向深耕,实现高度可编程、通用和专用并存的智能网卡,构造成熟的智能网卡软硬件体系。


针对不同的场景和用户需求,智能网卡通过“软件定义,硬件加速”的软硬件协作方式,满足用户对存储、网络、安全等应用的具体需求。上下游企业共同构建开放、安全的生态环境,按照存储、虚拟化等基础技术研发的规律来研发智能网卡,划分好逻辑层次,构造一个完整的智能网卡软硬件体系。


(2)智能网卡创新产品赋能各行各业,推进智能网卡成为新的生产力,实现承载更多业务种类和业务场景的智能网卡产品。


智能网卡通过承载更加丰富的应用场景实现横向扩展,包括但不限于云网络、存储、安全、高性能计算以及人工智能、5G MEC 等应用场景。例如在云网络中,智能网卡提供硬件加速服务,将原本在CPU 上运行的通信和虚拟化操作卸载到智能网卡;在网络安全中,智能网卡可以将安全业务操作(如数据的加密/解密)从 CPU 卸载到网卡来降低 CPU 负载;在数据存储中,智能网卡可成为存储的入口,将远程访问和分布式的存储本地化。


SmartNIC/DPU技术相关产业链现状分析。

(1)上游分析


EDA 是集成电路设计的基础工具,贯穿集成电路设计、制造和封测等环节,对智能网卡的研发与量产至关重要。从全球角度来看,EDA行业主要由Synopsys、Cadence、Siemens EDA(原Mentor Graphics)三家公司垄断,共占全球市场份额的 78%,属于第一梯队。



从国内角度来看,国内 EDA 企业(主要有华大九天、概伦电子和芯启源)与第一梯队仍有较大差距,根据赛迪智库数据,2020 年国内 EDA 市场销售额约 80%由全球三巨头占据,华大九天作为国内EDA 龙头企业仅占约 6%。


(2)智能网卡产业分析

目前全球智能网卡产业仍处于起步阶段,国内外企业呈现百家争鸣的竞争格局。



从时间来看,全球智能网卡厂商步调基本一致,商品落地、抢占市场、营造生态成为智能网卡产业发展的关键。智能网卡商品落地方案多以从基本的网络控制器扩展至 SoC 为主,主流方案类型可概括为三种:


  • 一是采取处理器配合 FPGA 外加加速引擎的智能网卡,例如 Intel 的 IPU,以牺牲部分灵活性为代价增强应用针对性和性能;

  • 二是采取最新处理器内核配合加速引擎的智能网卡,例如 Marvell 的 OCTEON 10,算力很高但是针对特殊的算法和应用仍具有局限性;

  • 三是采用处理器配合 ASIC 外加加速引擎的智能网卡,例如 NVIDIA 的 BlueField-3,同时保证可编程灵活性和应用高性能,是目前最新的产品趋势。


(3)下游分析

全球云厂商、通信领域厂商已开始积极布局,智能网卡的应用需求不断扩张。亚马逊与阿里云皆在 DPU 概念被正式提出之前就自主研发了相关产品用于自身业务定制化硬件加速,例如:AWS Nitrosystem 和 X-Dragon。国内电信领域业务持续扩大,虚拟化及边缘侧对智能网卡的需求稳步提升,智能网卡可以解决边缘算力资源消耗问题同时降低机房功耗,提升边缘业务能力。国内外智能网卡终端应用服务商步调基本一致,国内终端应用服务商有望通过抓住时间窗口或与智能网卡芯片厂商合作,进一步提升自身业务和技术能力,从而占据智能网卡市场有利地位。


本文参考自“未来网络:SmartNIC DPU技术白皮书”,介绍 SmartNIC/DPU 的特征和需求、硬件和编程架构、技术和产业发展趋势,提供应用场景和应用案例,介绍相关公司及产品、以及 SmartNIC/DPU 的测试技术,同时提出发展建议,以期促进SmartNIC/DPU 相关产业发展。


下载链接:
未来网络:SmartNIC DPU技术白皮书
开源芯片:处理器芯片发展新趋势
中国云计算生态蓝皮书(2022)
处理器芯片发展新趋势:开源芯片
SCM技术及趋势合集
NVM技术及趋势合集

算力网络技术白皮书(2022)

中国机器人产业发展报告(2022年)

《Hot Chips 33:光子处理器合集》

《Hot Chips 33:加速器合集》

《Hot Chips 33:高性能、低功耗处理器/控制器》

《Hot Chips 33:神经网络处理器(合集)》

《硅片国产化进程》


来源:网络通信与安全紫金山实验室等


本号资料全部上传至知识星球,更多内容请登录智能计算芯知识(知识星球)星球下载全部资料。



免责申明:本号聚焦相关技术分享,内容观点不代表本号立场,可追溯内容均注明来源,发布文章若存在版权等问题,请留言联系删除,谢谢。



电子书<服务器基础知识全解(终极版)>更新完毕。

获取方式:点击“阅读原文”即可查看182页 PPT可编辑版本和PDF阅读版本详情。


温馨提示:

请搜索“AI_Architect”或“扫码”关注公众号实时掌握深度技术分享,点击“阅读原文”获取更多原创技术干货。


智能计算芯世界 聚焦人工智能、芯片设计、异构计算、高性能计算等领域专业知识分享.
评论
  • PLC组态方式主要有三种,每种都有其独特的特点和适用场景。下面来简单说说: 1. 硬件组态   定义:硬件组态指的是选择适合的PLC型号、I/O模块、通信模块等硬件组件,并按照实际需求进行连接和配置。    灵活性:这种方式允许用户根据项目需求自由搭配硬件组件,具有较高的灵活性。    成本:可能需要额外的硬件购买成本,适用于对系统性能和扩展性有较高要求的场合。 2. 软件组态   定义:软件组态主要是通过PLC
    丙丁先生 2025-01-06 09:23 85浏览
  •     为控制片内设备并且查询其工作状态,MCU内部总是有一组特殊功能寄存器(SFR,Special Function Register)。    使用Eclipse环境调试MCU程序时,可以利用 Peripheral Registers Viewer来查看SFR。这个小工具是怎样知道某个型号的MCU有怎样的寄存器定义呢?它使用一种描述性的文本文件——SVD文件。这个文件存储在下面红色字体的路径下。    例:南京沁恒  &n
    电子知识打边炉 2025-01-04 20:04 100浏览
  • 每日可见的315MHz和433MHz遥控模块,你能分清楚吗?众所周知,一套遥控设备主要由发射部分和接收部分组成,发射器可以将控制者的控制按键经过编码,调制到射频信号上面,然后经天线发射出无线信号。而接收器是将天线接收到的无线信号进行解码,从而得到与控制按键相对应的信号,然后再去控制相应的设备工作。当前,常见的遥控设备主要分为红外遥控与无线电遥控两大类,其主要区别为所采用的载波频率及其应用场景不一致。红外遥控设备所采用的射频信号频率一般为38kHz,通常应用在电视、投影仪等设备中;而无线电遥控设备
    华普微HOPERF 2025-01-06 15:29 132浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球无人机锂电池产值达到2457百万美元,2024-2030年期间年复合增长率CAGR为9.6%。 无人机锂电池是无人机动力系统中存储并释放能量的部分。无人机使用的动力电池,大多数是锂聚合物电池,相较其他电池,锂聚合物电池具有较高的能量密度,较长寿命,同时也具有良好的放电特性和安全性。 全球无人机锂电池核心厂商有宁德新能源科技、欣旺达、鹏辉能源、深圳格瑞普和EaglePicher等,前五大厂商占有全球
    GIRtina 2025-01-07 11:02 74浏览
  • 村田是目前全球量产硅电容的领先企业,其在2016年收购了法国IPDiA头部硅电容器公司,并于2023年6月宣布投资约100亿日元将硅电容产能提升两倍。以下内容主要来自村田官网信息整理,村田高密度硅电容器采用半导体MOS工艺开发,并使用3D结构来大幅增加电极表面,因此在给定的占位面积内增加了静电容量。村田的硅技术以嵌入非结晶基板的单片结构为基础(单层MIM和多层MIM—MIM是指金属 / 绝缘体/ 金属) 村田硅电容采用先进3D拓扑结构在100um内,使开发的有效静电容量面积相当于80个
    知白 2025-01-07 15:02 78浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 106浏览
  • By Toradex 秦海1). 简介嵌入式平台设备基于Yocto Linux 在开发后期量产前期,为了安全以及提高启动速度等考虑,希望将 ARM 处理器平台的 Debug Console 输出关闭,本文就基于 NXP i.MX8MP ARM 处理器平台来演示相关流程。 本文所示例的平台来自于 Toradex Verdin i.MX8MP 嵌入式平台。  2. 准备a). Verdin i.MX8MP ARM核心版配合Dahlia载板并
    hai.qin_651820742 2025-01-07 14:52 51浏览
  • 这篇内容主要讨论三个基本问题,硅电容是什么,为什么要使用硅电容,如何正确使用硅电容?1.  硅电容是什么首先我们需要了解电容是什么?物理学上电容的概念指的是给定电位差下自由电荷的储藏量,记为C,单位是F,指的是容纳电荷的能力,C=εS/d=ε0εrS/4πkd(真空)=Q/U。百度百科上电容器的概念指的是两个相互靠近的导体,中间夹一层不导电的绝缘介质。通过观察电容本身的定义公式中可以看到,在各个变量中比较能够改变的就是εr,S和d,也就是介质的介电常数,金属板有效相对面积以及距离。当前
    知白 2025-01-06 12:04 175浏览
  • 在智能家居领域中,Wi-Fi、蓝牙、Zigbee、Thread与Z-Wave等无线通信协议是构建短距物联局域网的关键手段,它们常在实际应用中交叉运用,以满足智能家居生态系统多样化的功能需求。然而,这些协议之间并未遵循统一的互通标准,缺乏直接的互操作性,在进行组网时需要引入额外的网关作为“翻译桥梁”,极大地增加了系统的复杂性。 同时,Apple HomeKit、SamSung SmartThings、Amazon Alexa、Google Home等主流智能家居平台为了提升市占率与消费者
    华普微HOPERF 2025-01-06 17:23 146浏览
  • 彼得·德鲁克被誉为“现代管理学之父”,他的管理思想影响了无数企业和管理者。然而,关于他的书籍分类,一种流行的说法令人感到困惑:德鲁克一生写了39本书,其中15本是关于管理的,而其中“专门写工商企业或为企业管理者写的”只有两本——《为成果而管理》和《创新与企业家精神》。这样的表述广为流传,但深入探讨后却发现并不完全准确。让我们一起重新审视这一说法,解析其中的矛盾与根源,进而重新认识德鲁克的管理思想及其著作的真正价值。从《创新与企业家精神》看德鲁克的视角《创新与企业家精神》通常被认为是一本专为企业管
    优思学院 2025-01-06 12:03 125浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 87浏览
  • 大模型的赋能是指利用大型机器学习模型(如深度学习模型)来增强或改进各种应用和服务。这种技术在许多领域都显示出了巨大的潜力,包括但不限于以下几个方面: 1. 企业服务:大模型可以用于构建智能客服系统、知识库问答系统等,提升企业的服务质量和运营效率。 2. 教育服务:在教育领域,大模型被应用于个性化学习、智能辅导、作业批改等,帮助教师减轻工作负担,提高教学质量。 3. 工业智能化:大模型有助于解决工业领域的复杂性和不确定性问题,尽管在认知能力方面尚未完全具备专家级的复杂决策能力。 4. 消费
    丙丁先生 2025-01-07 09:25 83浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦