清华最新自动驾驶算法SOTA:规划被端到端大一统,还解决了黑盒问题|ICLR2025

原创 智能车参考 2025-02-14 12:04
贾浩楠 发自 副驾寺
智能车参考 | 公众号 AI4Auto

又一个自动驾驶最新SOTA成果来了——

清华大学AIR智能产业研究院联合毫末智行、中科院自动化所团队、港中文联合出品,提出了一种全新的自动驾驶规划算法,发表在ICLR 2025。

图片

性能表现刚刚在nuPlan数据集上登顶,超越了仅仅2个月前港科大团队SOTA成果

这也许就是新的自动驾驶范式对技术加速重构的最直观体现。

新研究做了什么事?

团队提出了一种创新的自动驾驶规划思路:基于Diffusion——扩散模型

Diffusion扩散模型2015年由斯坦福大学首次提出,在生成式建模中具有重要地位,尤其在图像生成和文本生成等领域展现出了强大的能力。AI生图领域知名的StableDiffusion,就是把Diffusion点燃的核心代表。

基本原理是通过一个前向过程逐渐添加噪声到数据上,直到数据变成完全随机的噪声,然后再通过一个后向过程逐步去除噪声,从而生成新的数据样本。

这种生成方式使得模型能够捕捉数据的复杂分布,并且可以通过控制噪声的添加和去除过程来生成多样化的样本。

整个生成数据的过程是模型化、AI化的,符合广义“端到端”定义,还能实现一定程度的调参和控制。

这两个特征使得扩散模型适合用于自动驾驶的规划过程,既能解决以往规则主导的规划方式死板难落地的问题,又能一定程度给出端到端“黑盒”输出难以控制的解决方案

团队提出的Diffusion Planner,在端到端规划数据集nuPlan的闭环评估中,取得了SOTA级表现,⼤幅降低了对后处理的依赖:

在几种不同的基准下(Val14、Test14等,包括nuPlan 14种挑战下数十到数千个场景),Diffusion Planner都达到当前最优性能。

另外,因为规则或传统端到端多少存在对nuPlan数据的过拟合问题,导致在新场景中的性能下降,所以团队还直接拿国内自动驾驶公司毫末智行的无人物流车数据集重新实验:

在行驶速度、可通行空间、道路标线、交互目标类型等等都大变的场景下,Diffusion Planner依然最佳,证明了有较强的鲁棒性。

更进一步,团队还比较了两项同样应用扩散模型的规划算法Diffusion-es和STR2-CPKS-800M:

同是基于扩散模型的自动驾驶规划器,Diffusion Planner依然胜出,尤其是对数据后处理的依赖大大降低。

怎么做到的?

一个整体思路是:

通过联合建模关键参与者的状态,将运动预测与闭环规划任务统一为一个未来轨迹生成任务

这样使模型能够同时生成所有关键参与者的未来轨迹,从而实现更加自然的协同行为。

但多车交互的复杂场景会产生更加多样的驾驶行为,增加了训练的难度。所以团队选择了扩散模型为框架进行训练,并基于Diffusion Transformer重新设计了自动驾驶规划器的结构:

具体而言,首先使用编码器提取感知数据中周围车辆的历史信息、道路信息和静态障碍物等等信息,并通过交叉注意力机制与加噪后的自车和周车轨迹进行信息信息融合

此外,模型还引入了额外的导航信息以及扩散模型特有的加噪步数信息。

为了避免模型重复自车历史行为导致闭环性能下降,仅考虑自车当前时刻的位置和朝向,并与周车的当前状态一起拼接到加噪轨迹中,用于后续自注意力机制的信息融合。通过这种方式,起始状态的引导还能进一步降低模型对未来轨迹生成的难度。

此外,基于扩散模型的引导机制,可以在模型的测试阶段引入安全,舒适等偏好,同时也可以根据用户需求灵活的改变模型输出的轨迹特性,例如速度特性。

不同的偏好可以通过加权求和轻松组合,并且在部署阶段可以灵活选择是否启用,提供更大的灵活性:

总结一下Diffusion Planner的价值创新之处在于:

设计了基于 Diffusion Transformer 的自动驾驶规划模型架构,统一了轨迹预测与规划任务,高效处理复杂场景输入。并联合建模周车运动预测与自车规划中的多模态驾驶行为,充分发挥扩散模型在闭环规划中的潜力,解决了现有基于学习的规划方法对后处理的严重依赖问题。

此外,借助扩散模型的引导机制,模型在部署阶段能够灵活适应不同的驾驶需求,提高泛化能力与实用性。

团队介绍

三位共同一作郑一楠梁睿鸣郑可馨,分别来自清华大学人工智能产业研究院(AIR)、中科院自动化所、香港中文大学。

郑一楠目前博士在读。

三位指导老师分别是清华AIR的刘菁菁教授、詹仙园副教授、清华车辆学院李升波教授。

刘菁菁教授是清华大学博士生导师,美国麻省理工学院 (MIT) 计算机科学博士,目前研究方向包括多模态大模型 (Multimodal LLM)、AI for Science、强化学习等。曾任微软资深首席研究部门主管,MIT计算机科学与人工智能实验室 (MIT CSAIL) 研究科学家,专注语音对话系统研究。

詹仙园副教授曾任京东科技数据科学家,微软亚洲研究院副研究员。主要学术研究方向为基于离线深度强化学习的数据驱动复杂系统控制优化,智能交通系统以及复杂网络。层主导了京东基于强化学习的火力发电优化研发项目。

李升波,清华大学车辆与运载学院教授、博士生导师。主要研究领域包括自动驾驶汽车、强化学习、最优控制与估计等。他在自动驾驶汽车领域取得了显著成就,提出了周期波动型节能操控、网联车群分布式控制、类脑学习集成式决策等核心理论方法,突破了高级别智能汽车自主学习与数据闭环所面临的一系列关键技术难题。

论文链接:https://arxiv.org/pdf/2501.15564

项目主页:https://zhengyinan-air.github.io/Diffusion-Planner/

— 联系作者 —

智能车2024年度评选结果

在经过广泛征集、专业推荐,以及智能车参考垂直社群的万人票选后,智能车2023年度评选结果正式发布。涵盖三类奖项:

· 十大智能车年度人物

· 十大智能车车型

· 十大智能车技术方案/产品

在汽车工业迎来百年未有之大变局时,我们希望能以此提供智能维度的参考和注脚。

其中,十大智能车技术方案/产品是:

<< 左右滑动查看更多>>

—  —

智能车参考】原创内容,未经账号授权,禁止随意转载。

点这里👇关注我,记得标星,么么哒~

智能车参考 在这里读懂智能汽车变革
评论
  • 一、芯片的发展历程总结:1、晶体管的诞生(1)电子管时代 20世纪40年代,电子管体积庞大、功耗高、可靠性差,无法满足计算机小型化需求。(2)晶体管时代 1947年,贝尔实验室的肖克利、巴丁和布拉顿发明点接触晶体管,实现电子信号放大与开关功能,标志着固态电子时代的开端。 1956年,肖克利发明晶体管。(3)硅基晶体管时代 早期晶体管采用锗材料,但硅更耐高温、成本低,成为主流材料。2、集成电路的诞生与发展 1958年,德州仪器工程师基尔比用锗材料制成世界上第一块含多个晶体管的集成电路,同年仙童半导
    碧海长空 2025-04-15 09:30 107浏览
  • 一、智能门锁市场痛点与技术革新随着智能家居的快速发展,电子门锁正从“密码解锁”向“无感交互”进化。然而,传统人体感应技术普遍面临三大挑战:功耗高导致续航短、静态人体检测能力弱、环境适应性差。WTL580微波雷达解决方案,以5.8GHz高精度雷达感知技术为核心,突破行业瓶颈,为智能门锁带来“精准感知-高效触发-超低功耗”的全新交互范式。二、WTL580方案核心技术优势1. 5.8GHz毫米波雷达:精准感知的革命全状态人体检测:支持运动、微动(如呼吸)、静态(坐卧)多模态感知,检测灵敏度达0.1m/
    广州唯创电子 2025-04-15 09:20 77浏览
  • 时源芯微 专业EMC解决方案提供商  为EMC创造可能(适用于高频时钟电路,提升EMC性能与信号稳定性)一、设计目标抑制电源噪声:阻断高频干扰(如DC-DC开关噪声)传入晶振电源。降低时钟抖动:确保晶振输出信号纯净,减少相位噪声。通过EMC测试:减少晶振谐波辐射(如30MHz~1GHz频段)。二、滤波电路架构典型拓扑:电源输入 → 磁珠(FB) → 大电容(C1) + 高频电容(C2) → 晶振VDD1. 磁珠(Ferrite Bead)选型阻抗特性:在目标频段(如100MHz~1GH
    时源芯微 2025-04-14 14:53 96浏览
  • 展会名称:2025成都国际工业博览会(简称:成都工博会)展会日期:4月23 -25日展会地址:西部国际博览城展位号:15H-E010科士威传动将展示智能制造较新技术及全套解决方案。 2025年4月23-25日,中国西部国际博览城将迎来一场工业领域的年度盛会——2025成都国际工业博览会。这场以“创链新工业,共碳新未来”为主题的展会上,来自全球的600+ 家参展企业将齐聚一堂,共同展示智能制造产业链中的关键产品及解决方案,助力制造业向数字化、网络化、智能化转型。科士威传动将受邀参展。&n
    科士威传动 2025-04-14 17:55 83浏览
  • 一、磁场发生设备‌电磁铁‌:由铁芯和线圈组成,通过调节电流大小可产生3T以下的磁场,广泛应用于工业及实验室场景(如电磁起重机)。‌亥姆霍兹线圈‌:由一对平行共轴线圈组成,可在线圈间产生均匀磁场(几高斯至几百高斯),适用于物理实验中的磁场效应研究。‌螺线管‌:通过螺旋线圈产生长圆柱形均匀磁场,电流与磁场呈线性关系,常用于磁性材料研究及电子束聚焦。‌超导磁体‌:采用超导材料线圈,在低温下可产生3-20T的强磁场,用于核磁共振研究等高精度科研领域。‌多极电磁铁‌:支持四极、六极、八极等多极磁场,适用于
    锦正茂科技 2025-04-14 13:29 71浏览
  • 四、芯片封测技术及应用场景1、封装技术的发展历程 (1)DIP封装:早期分立元件封装,体积大、引脚少; (2)QFP封装:引脚密度提升,适用于早期集成电路。 (3)BGA封装:高密度互连,散热与信号传输优化; (4)3D封装:通过TSV(硅通孔)实现垂直堆叠,提升集成度(如HBM内存堆叠); (5)Chiplet封装:异质集成,将不同工艺节点的模块组合(如AMD的Zen3+架构)。 (6)SiP封装:集成多种功能芯片(如iPhone的A系列SoC整合CPU、GPU、射频模块)。2、芯片测试 (1
    碧海长空 2025-04-15 11:45 171浏览
  • 你知道精益管理中的“看板”真正的意思吗?在很多人眼中,它不过是车间墙上的一块卡片、一张单子,甚至只是个用来控制物料的工具。但如果你读过大野耐一的《丰田生产方式》,你就会发现,看板的意义远不止于此。它其实是丰田精益思想的核心之一,是让工厂动起来的“神经系统”。这篇文章,我们就带你一起从这本书出发,重新认识“看板”的深层含义。一、使“看板”和台车结合使用  所谓“看板”就是指纸卡片。“看板”的重要作用之一,就是连接生产现场上道工序和下道工序的信息工具。  “看板”是“准时化”生产的重要手段,它总是要
    优思学院 2025-04-14 15:02 117浏览
  • 三、芯片的制造1、制造核心流程 (1)晶圆制备:以高纯度硅为基底,通过拉晶、切片、抛光制成晶圆。 (2)光刻:光刻、离子注入、薄膜沉积、化学机械抛光。 (3)刻蚀与沉积:使用干法刻蚀(等离子体)精准切割图形,避免侧壁损伤。 (4)掺杂:注入离子形成PN结特性,实现晶体管开关功能。2、材料与工艺创新 (1)新材料应用: 高迁移率材料(FinFET中的应变硅、GaN在射频芯片中的应用); 新型封装技术(3D IC、TSV硅通孔)提升集成度。 (2)工艺创新: 制程从7nm到3nm,设计架构由F
    碧海长空 2025-04-15 11:33 172浏览
  •   高空 SAR 目标智能成像系统软件:多领域应用的前沿利器   高空 SAR(合成孔径雷达)目标智能成像系统软件,专门针对卫星、无人机等高空平台搭载的 SAR传感器数据,融合人工智能与图像处理技术,打造出的高效目标检测、识别及成像系统。此软件借助智能算法,显著提升 SAR图像分辨率、目标特征提取能力以及实时处理效率,为军事侦察、灾害监测、资源勘探等领域,提供关键技术支撑。   应用案例系统软件供应可以来这里,这个首肌开始是幺伍扒,中间是幺幺叁叁,最后一个是泗柒泗泗,按照数字顺序组合
    华盛恒辉l58ll334744 2025-04-14 16:09 146浏览
  •   无人装备作战协同仿真系统软件:科技的关键支撑   无人装备作战协同仿真系统软件,作为一款综合性仿真平台,主要用于模拟无人机、无人车、无人艇等无人装备在复杂作战环境中的协同作战能力、任务规划、指挥控制以及性能评估。该系统通过搭建虚拟战场环境,支持多种无人装备协同作战仿真,为作战指挥、装备研发、战术训练和作战效能评估,提供科学依据。   应用案例   系统软件供应可以来这里,这个首肌开始是幺伍扒,中间是幺幺叁叁,最后一个是泗柒泗泗,按照数字顺序组合就可以找到。   核心功能   虚拟战
    华盛恒辉l58ll334744 2025-04-14 17:24 87浏览
  • 一、智能语音播报技术演进与市场需求随着人工智能技术的快速发展,TTS(Text-to-Speech)技术在商业场景中的应用呈现爆发式增长。在零售领域,智能收款机的语音播报功能已成为提升服务效率和用户体验的关键模块。WT3000T8作为新一代高性能语音合成芯片,凭借其优异的处理能力和灵活的功能配置,正在为收款机智能化升级提供核心技术支持。二、WT3000T8芯片技术特性解析硬件架构优势采用32位高性能处理器(主频240MHz),支持实时语音合成与多任务处理QFN32封装(4x4mm)实现小型化设计
    广州唯创电子 2025-04-15 08:53 93浏览
  • 二、芯片的设计1、芯片设计的基本流程 (1)需求定义: 明确芯片功能(如处理器、存储、通信)、性能指标(速度、功耗、面积)及目标应用场景(消费电子、汽车、工业)。 (2)架构设计: 确定芯片整体框架,包括核心模块(如CPU、GPU、存储单元)的协同方式和数据流路径。 (3)逻辑设计: 通过硬件描述语言(如Verilog、VHDL)将架构转化为电路逻辑,生成RTL(寄存器传输级)代码。 (4)物理设计: 将逻辑代码映射到物理布局,涉及布局布线、时序优化、功耗分析等,需借助EDA工具(如Ca
    碧海长空 2025-04-15 11:30 135浏览
  • 在当今汽车电子化和智能化快速发展的时代,车规级电子元器件的质量直接关系到汽车安全性能。三星作为全球领先的电子元器件制造商,其车规电容备受青睐。然而,选择一个靠谱的三星车规电容代理商至关重要。本文以行业领军企业北京贞光科技有限公司为例,深入剖析如何选择优质代理商。选择靠谱代理商的关键标准1. 授权资质与行业地位选择三星车规电容代理商首先要验证其授权资质及行业地位。北京贞光科技作为中国电子元器件行业的领军者,长期走在行业前沿,拥有完备的授权资质。公司专注于市场分销和整体布局,在电子元器件领域建立了卓
    贞光科技 2025-04-14 16:18 139浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦