【秒懂承载】热点技术名词-“全调度以太网GSE”

原创 中兴文档 2025-01-15 09:02

今日和文档君一起学习技术名词:

全调度以太网技术(Global Scheduling Ethernet,GSE)——基于报文容器PKTC转发和负载均衡,并实现全局调度

Q
什么是全调度以太网GSE?
A

GSE(Global Scheduling Ethernet),即全调度以太网技术。GSE是由中国移动联合产业合作伙伴共同提出的一种以太网技术架构,是在现有以太网的基础上进行了优化和创新,以满足智算中心高性能网络技术,旨在突破传统以太网的技术瓶颈,打造无阻塞、高带宽、低时延的新型智算中心网络。

Q
为什么需要GSE?
A
在AI训练中,我们常用RDMA协议来高速传输数据。但RDMA对丢包非常敏感,哪怕只丢了一点点数据包,网络的有效传输速度就会大幅下降。

而AI大模型训练需要多个计算设备一起工作,它们之间需要频繁通信和同步,这对网络的要求就特别高。现在AI模型越来越大,智算中心的网络性能就得更强才行,需要无阻塞、“0”丢包、低延迟。

传统的以太网在大规模、高速度的数据传输时,容易出现网络拥塞等问题。这就像是一条高速公路,车一多就容易堵。

智算中心的网络中数据流虽然不多,但每个流的数据量都很大,传统的负载均衡方式就容易出问题,导致数据包丢失,动态时延增大等问题,从而影响AI训练的效率。

GSE技术就像是给去往某个目的地的多条高速公路装上了智能导航系统,它能主动控制车流选择最优路径,避免堵车,更高效地转发数据包。这样一来,丢包就少了,网络延迟也低了,整体传输速度就更高了,AI训练效率也就提升了。
Q
GSE技术特点
A
1. 从“流”分发转变为“报文”分发。传统ECMP 负载均衡会导致链路负载不均以及哈希极化,可能引起拥塞和丢包。

GSE设备会将数据包进行逻辑分组,组装成长度较长的“定长”容器,并基于报文容器转发和动态负载均衡,实现单条流在多路径上均匀地负载分担,提升有效带宽。

如果把报文当作货物,报文容器就好像载货能力一样的货车,每辆货车拉着同样重量的货物(数量可以不一样),大量货车被均匀地调度到去往同个目的地的多条高速路上,可以最大程度利用道路资源。

2. 从被动拥塞控制到主动流控,引入“授权请求”和“全局调度机制”,通过构建基于全局动态调度队列(DGSQ)的拥塞控制机制,本设备发送流量速率由最终的设备出口、途经的设备统一进行全网端到端授权,确保了流量负载不超过网络的承载能力,有效避免了网络拥塞而丢包。

这就好像货车在出发前先询问了目的地的库房是否具备接收能力,根据目的地的收货能力以及沿途路况来决定发出多少货物,确保货物能准确送达并接收。

由于AI大模型训练时任意一轮计算的结束均依赖最后一个结果的返回,降低网络长尾时延可有效提升训练完成时间。

交换网络整体转发时延和转发路径上中间节点的拥塞情况正相关,消除中间节点的拥塞就可消除长尾时延。GSE技术实现了精细化调度和和高负载均衡,可有效降低长尾时延,提升训练效率。

GSE支持GSE-N2N和GSE-E2E两大技术场景,GSE-N2N通过网络设备实现全部GSE功能,支持计算与网络设备的解耦;GSE-E2E将部分GSE能力延伸至服务器网卡,借助端网协同实现高性能集群互联。
Q
GSE vs RoCEv2 vs InfiniBand
A

GSERoCEv2
InfiniBand
网络设备GSE交换机以太交换机IB交换机
性能组网性能相较传统RoCEv2可提升40%已上经过调优可接近IB
兼容性优,基于以太网改造,有开放标准优,增强以太网封闭,不兼容以太网
产业生态中国移动携手国内智算生态企业共同发布产品及标准。多种芯片方案,大量网络设备厂家Nvidia为主等少量海外厂商
易用性无需复杂的网络参数配置需要调节各种网络参数,较复杂,自动化部署正在完善中集中式管理机制,由子网管理器负责整个网络转发表的计算与分发等工作
成熟度新技术,持续完善中成熟,还在持续演进完善成熟

注:RoCEv2(RDMA over Converged Ethernet,融合以太网承载RDMA)

Q
GSE有哪些应用场景?
A

GSE主要面向无损、高带宽、低时延等高性能网络需求业务场景,如AI大模型训练的智算中心网络。

Q
GSE业界应用进展
A
  • 在2023年9月的中国网络大会上,中国移动研究院携手合作伙伴发布业界首款“全调度以太网(GSE)”样机。
  • 在2023年11月21日的开放数据中心委员会(ODCC)冬季全会会议上,正式成立全调度以太网(GSE)技术特设组并召开第一次工作组会议。
  • 在2024年9月27日的中国算力大会上,中国移动携手国内智算生态企业共同发布了全调度以太网(GSE)全套技术标准及首套商用产品。
  • 2024.11,中国移动联合云豹智能共同研发首颗GSE DPU芯片--“智算琢光”。
  • 2024.12,中国移动联合中兴共同研发首颗可完整支持GSE功能的大容量高性能交换芯片
我们是一群平均从业年限5+的通信专业工程师。
关注我们,带你了解通信世界的精彩!

中兴文档 通俗易懂且高颜值的通讯技术文档!
评论 (0)
  • 文/Leon编辑/cc孙聪颖‍在新能源汽车赛道的残酷洗牌中,威马、爱驰等数十个品牌黯然退场,极越、哪吒汽车也深陷经营困局,“跨界造车” 早已褪去曾经的光环,成为吞噬企业资金与精力的风险泥潭,尤其对上市公司而言,稍有不慎便会被拖入业绩泥沼。当行业共识已清晰显现 —— 新能源汽车市场这片红海正上演着惨烈的生存之战,石头科技创始人昌敬却逆势入局,掌舵极石汽车,其押注造车的抉择,正让本就面临挑战的石头科技主业雪上加霜。2025 年 4 月中旬,昌敬突然清空微博、抖音等社交媒体账号的举动,迅速引爆舆论场。
    华尔街科技眼 2025-05-09 20:53 30浏览
  • 【拆解】+自动喷香机拆解 家里之前买了从PDD买了一个小型自动喷香机放在厕所里。来增加家里的温馨感,这东西看着确实小巧,精致。可是这东西吧,耗电就是快,没过几天就没电了。今个就让我拆开看看什么在捣鬼。如下是产品的实物和宣传图: 由于螺丝孔太小和限位很深。对于我的螺丝刀套装没用。只能使用那种螺丝刀细头,同时又长的小螺丝刀进行拆解 拧下三颗螺丝钉,用一字螺丝刀撬开外壳,内部结构就呈现在眼前。 内部构造相当简单,部件没多少。就是锂电池供电,通过MCU实现按键控制,段码屏控制,LE
    zhusx123 2025-05-10 19:55 53浏览
  • 体积大小:14*11*2.6CM,电气参数:输入100V-240V/10A,输出16V24A。PCB 正面如下图。PCB 背面如下图。根据实际功能可以将PCB分成几部分:EMI滤波,PFC电路,LLC电路。EMI滤波区域,两级共模电感,LN各用了保险丝加压敏电阻,继电器(HF32FV-G)用来切除NTC的,为了提高效率点,如下图。PFC电路区域,如下图。LLC电路区域,如下图。详细分析一下该电源用的主要IC还有功率器件。AC侧采用了两颗整流桥进行并联,器件增加电流应力,如下图。共模电感都有放电针
    liweicheng 2025-05-10 20:03 39浏览
  • 在印度与巴基斯坦的军事对峙情境下,歼10C的出色表现如同一颗投入平静湖面的巨石,激起层层涟漪,深刻印证了“质量大于数量”这一铁律。军事领域,技术优势就是决定胜负的关键钥匙。歼10C凭借先进的航电系统、强大的武器挂载能力以及卓越的机动性能,在战场上大放异彩。它能够精准捕捉目标,迅速发动攻击,以一敌多却毫不逊色。与之形成鲜明对比的是,单纯依靠数量堆砌的军事力量,在面对先进技术装备时,往往显得力不从心。这一现象绝非局限于军事范畴,在当今社会的各个领域,“质量大于数量”都已成为不可逆转的趋势。在科技行业
    curton 2025-05-11 19:09 178浏览
  • 【拆解】+CamFi卡菲单反无线传输器拆解 对于单反爱好者,想要通过远程控制自拍怎么办呢。一个远程连接,远程控制相机拍摄的工具再合适不过了。今天给大伙介绍的是CamFi卡菲单反无线传输器。 CamFi 是专为数码单反相机打造的无线传输控制器,自带的 WiFi 功能(无需手机流量),不但可通过手机、平板、电脑等设备远程连接操作单反相机进行拍摄,而且还可实时传输相机拍摄的照片到 iPad 和电视等大屏设备进行查看和分享。 CamFi 支持大部分佳能和尼康单反相机,内置可充电锂离子电池,无需相机供电。
    zhusx123 2025-05-11 14:14 89浏览
  •   基于 2025 年行业权威性与时效性,以下梳理国内知名软件定制开发企业,涵盖综合型、垂直领域及特色技术服务商:   华盛恒辉科技有限公司:是一家专注于高端软件定制开发服务和高端建设的服务机构,致力于为企业提供全面、系统的开发制作方案。在部队政企开发、建设到运营推广领域拥有丰富经验,在教育,工业,医疗,APP,管理,商城,人工智能,部队软件、工业软件、数字化转型、新能源软件、光伏软件、汽车软件,ERP,系统二次开发,CRM等领域有很多成功案例。   五木恒润科技有限公司:是一家专业的部队信
    华盛恒辉l58ll334744 2025-05-12 16:13 72浏览
  • 在 AI 浪潮席卷下,厨电行业正经历着深刻变革。AWE 2025期间,万得厨对外首次发布了wan AiOS 1.0组织体超智能系统——通过AI技术能够帮助全球家庭实现从健康检测、膳食推荐,到食材即时配送,再到一步烹饪、营养总结的个性化健康膳食管理。这一创新之举并非偶然的个案,而是整个厨电行业大步迈向智能化、数字化转型浪潮的一个关键注脚,折射出全行业对 AI 赋能的热切渴求。前有标兵后有追兵,万得厨面临着高昂的研发成本与技术迭代压力,稍有懈怠便可能被后来者赶
    用户1742991715177 2025-05-11 22:44 72浏览
  • 行车记录仪是长这个样子的,如下图。从前面拆去玻璃挡板,可以清晰的看见里面的部件,5个按键电路板,液晶显示屏,摄像头,喇叭,电池包,还有一块主电路板。液晶显示屏正面,如下图。液晶显示屏背面,如下图。喇叭,如下图。5个按键的电路板,MENU,DOWN,POWER,UP,OK总共5个按键功能,导线连接到主电路板上,如下图。电池包,303040聚合物锂电池,3.7V,300mAH,如下图。如下图。摄像头,如下图。拿去摄像头外壳,如下图。分离广角聚集镜头和PCB板,如下图。广角聚焦镜头,具体结构如下图。P
    liweicheng 2025-05-09 22:50 29浏览
  •         信创产业含义的“信息技术应用创新”一词,最早公开信息见于2019年3月26日,在江苏南京召开的信息技术应用创新研讨会。本次大会主办单位为江苏省工业和信息化厅和中国电子工业标准化技术协会安全可靠工作委员会。        2019年5月16日,美国将华为列入实体清单,在未获得美国商务部许可的情况下,美国企业将无法向华为供应产品。       2019年6
    天涯书生 2025-05-11 10:41 128浏览
  • 蓝牙耳机是长这个样子,如下图。背部图,如下图。拆开L耳的一侧,有NFC和电池包(501230 3.7V 150mAh)如下图。电池包(501230 3.7V 150mAh)如下图。NFC正面,如下图。NFC背面,如下图。如何理解NFC的工作原理呢,搜集一下相关的资料,如下图。拆开R耳的一侧,PCB正面,如下图。PCB背面,如下图。有两组红黑的线,一组连接到了喇叭,另一组连接到了MIC头上,MIC头参数如下图。蓝牙模块(CSR 8635),有蛇形PCB走线做成天线,节约了天线成本,如下图。该IC介
    liweicheng 2025-05-10 00:45 36浏览
  •   定制软件开发公司推荐清单   在企业数字化转型加速的2025年,定制软件开发需求愈发多元复杂。不同行业、技术偏好与服务模式的企业,对开发公司的要求大相径庭。以下从技术赛道、服务模式及行业场景出发,为您提供适配的定制软件开发公司推荐及选择建议。   华盛恒辉科技有限公司:是一家专注于高端软件定制开发服务和高端建设的服务机构,致力于为企业提供全面、系统的开发制作方案。在部队政企开发、建设到运营推广领域拥有丰富经验,在教育,工业,医疗,APP,管理,商城,人工智能,部队软件、工业软件、数字化转
    华盛恒辉l58ll334744 2025-05-12 15:55 103浏览
  • 递交招股书近一年后,曹操出行 IPO 进程终于迎来关键节点。从 2024 年 4 月首次递表,到 2025 年 4 月顺利通过中国证监会境外发行上市备案,并迅速更新招股书。而通过上市备案也标志着其赴港IPO进程进入实质性推进阶段,曹操出行最快有望于2025年内完成港股上市,成为李书福商业版图中又一关键落子。行路至此,曹操出行面临的挑战依然不容忽视。当下的网约车赛道,早已不是当年群雄逐鹿的草莽时代,市场渐趋饱和,竞争近乎白热化。曹操出行此时冲刺上市,既是背水一战,也是谋篇布局。其招股书中披露的资金
    用户1742991715177 2025-05-10 21:18 57浏览
  • ‌磁光克尔效应(Magneto-Optic Kerr Effect, MOKE)‌ 是指当线偏振光入射到磁性材料表面并反射后,其偏振状态(偏振面旋转角度和椭偏率)因材料的磁化强度或方向发生改变的现象。具体表现为:1、‌偏振面旋转‌:反射光的偏振方向相对于入射光发生偏转(克尔旋转角 θK)。2、‌椭偏率变化‌:反射光由线偏振变为椭圆偏振(克尔椭偏率 εK)。这一效应直接关联材料的磁化状态,是表征磁性材料(如铁磁体、反铁磁体)磁学性质的重要非接触式光学探测手段,广泛用于
    锦正茂科技 2025-05-12 11:02 95浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦