创新的动态轨迹预测方法:HPNet-生成准确稳定的未来轨迹!



关注公众号,点击公众号主页右上角“ ··· ”,设置星标,实时关注智能汽车电子与软件最新资讯

论文标题:
HPNet: Dynamic Trajectory Forecasting with Historical Prediction Attention
论文作者:
Xiaolong Tang, Meina Kan, Shiguang Shan, Zhilong Ji, Jinfeng Bai, Xilin Chen

导读:
本文提出了一种动态轨迹预测方法,通过结合历史帧和历史预测结果来提高预测的稳定性和准确性。它引入了历史预测注意力模块,以编码连续预测之间的动态关系,并通过三重因子注意力模块实现了最先进的性能。本方法能够生成准确且稳定的未来轨迹,这对于自动驾驶系统落地至关重要。

01本文概要

在自动驾驶中,精确预测道路智能体的未来轨迹至关重要。现有的方法主要采用了一种静态的范式:通过固定长度的历史帧来预测未来的轨迹。然而,这些方法在相邻时间戳中独立进行预测,可能会引起预测的不稳定性和不一致性。考虑到连续时间戳中的历史轨迹大量重叠,预测结果应当展现出内在的相关性,例如,重叠的预测轨迹应保持一致,或者在不同的情况下,根据道路状况共享相同的运动目标。


基于这些考虑,作者提出了HPNet——一种创新的动态轨迹预测方法。为了确保轨迹预测的稳定性和准确性,我们的方法不仅利用了包括地图和智能体状态的历史帧,还考虑了历史预测结果。具体来说,我们设计了一个全新的历史预测注意力模块,用于自动捕捉连续预测之间的动态关系。此外,该模块通过利用历史预测,扩大了注意力的范围,使其超越了当前可见的窗口。


作者提出的历史预测注意力,结合智能体注意力和模式注意力,被整合为三重因子注意力模块,构成了HPNet的核心架构。在Argoverse和INTERACTION数据集上的实验验证了HPNet的先进性能,证明其能够生成准确且稳定的未来轨迹预测。



图1|之前方法和作者的方法之间的差异。之前的方法(上方)将轨迹预测视为静态任务,基于固定长度的历史帧预测未来轨迹。它们即使在相邻时间戳也独立地进行预测,尽管输入数据存在大量重叠。相反,HPNet(下方)将轨迹预测视为动态任务。它不仅利用历史帧,还使用历史预测嵌入来进行预测轨迹。


02方法

本文提出的HPNet如下图所示。本模型由三部分组成:时空上下文编码、三重因子注意力和多模态输出。首先,智能体和车道的时空特征与可学习的模式查询聚合,以生成可以初步预测未来轨迹的预测嵌入。然后,进行三重因子注意力处理,包括智能体注意力、历史预测注意力和模式注意力,以精炼预测嵌入。其中,智能体注意力模拟智能体之间的互动,模式注意力模拟不同模式(即不同预测路径)之间的互动,而历史预测注意力是我们提出的一个新模块,用于动态地模拟当前和历史预测之间的内在关联。最后,通过多层感知器(MLP)解码预测嵌入,以获得预测轨迹,这些轨迹再次输入整个流程,以提高未来预测的精确度。


图2|HPNet的概览


■2.1 时空上下文编码模块


智能体特征编码:将每个智能体在每个时间戳的位置、运动状态、语义属性等信息,通过两个多层感知机(MLP)编码成智能体节点嵌入。同时利用相对坐标系提取运动方向等信息。


道路特征编码:将道路段的位置、长度、属性等信息,也通过两个多层感知机(MLP)编码成道路节点嵌入。此外,构建道路节点之间的连接关系,如相邻、前驱、后继等。


时空注意力:采用时间注意力和空间注意力两个并行模块。时间注意力用于聚合智能体的历史时序信息,而空间注意力用于建模智能体与道路之间的交互。将这两种注意力的结果相加,得到初始预测嵌入。


■2.2 三重因子注意力模块


智能体注意力:对每个时间戳和预测模式下的智能体节点,进行自注意力计算,以建模智能体间的相互影响。一方面,智能体注意力模型模拟了智能体在各自的时空上下文中的相互作用。另一方面,它也可以被视为不同智能体未来轨迹之间的相互作用,从而减少潜在的碰撞风险。


历史预测注意力:通过使用当前预测嵌入与之前一段时间的所有预测嵌入进行注意力计算,从而建模当前预测与历史预测之间的动态关系。这不仅提高了预测的稳定性和准确性,还扩大了注意力的范围。而且历史预测注意力模块不需要额外的训练时间和推理开销,仅通过注意力机制建模历史预测信息。因此能够在不增加复杂度的情况下提升模型性能。


模式注意力:在前两个注意力机制的基础上,对不同预测模式之间进行自注意力建模,进一步增强多模态输出的表达能力。它通过建模不同预测轨迹之间的相互影响,增强了模型对未来不确定性的理解能力,从而产生更加稳定可靠的预测结果。


■2.3 多模态输出模块


经过三重注意力机制优化的预测嵌入,将通过多层感知机(MLP)解码为多模态的未来轨迹。因为在自动驾驶等应用场景中,智能体未来的行为存在很大不确定性,通过输出多个可能的未来轨迹,而不是单一的预测,可以更好地反映这种未来不确定性。


03结果展示

作者在Argoverse和INTERACTION数据集上进行了实验,展示了其在动态轨迹预测方面的先进性能。


表1|与最先进方法在Argoverse测试集上的性能比较,其中b-minFDE是官方排名指标。对于每个指标,最佳结果以粗体显示,次佳结果下划线。


表2|与最先进方法在INTERACTION测试集上的性能比较。对于每个指标,最佳结果以粗体显示,次佳结果下划线。


表3|三重因子注意力的消融实验。实验在Argoverse验证集上进行。


图3|作者的HPNet和没有历史预测注意力的基线在Argoverse验证集上的预测准确性(b-minFDE↓)和稳定性(累计ADE↓)的比较。


图4|(a) 基线(b) HPNet。在Argoverse验证集上的定性结果。车道、历史轨迹、ground truth轨迹和六个预测轨迹分别用灰色、绿色、红色和蓝色表示。


图5|HPNet(下)和基线(上)的预测结果


04总结

作者提出了一种新颖的动态轨迹预测方法——HPNet。设计了一个历史预测注意力模块,用于模拟连续预测之间的动态关系。它采用历史预测嵌入来指导当前预测,使得预测轨迹更加准确和稳定。在Argoverse和INTERACTION数据集上的实验表明,作者提出的HPNet实现了最先进的性能,并且还证明了历史预测注意力模块可以有效提高模型的准确性和稳定性。

来源: 深蓝AI


-END-

关注公众号,点击公众号主页右上角“ ··· ”,设置星标,实时关注智能汽车电子与软件最新资讯

智能汽车电子与软件 专注于汽车电子领域的信息交融平台,涵盖汽车电子行业资讯、市场动态、技术干货、知识见解、行业趋势等资讯深度覆盖。
评论
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 107浏览
  • 百佳泰特为您整理2025年1月各大Logo的最新规格信息,本月有更新信息的logo有HDMI、Wi-Fi、Bluetooth、DisplayHDR、ClearMR、Intel EVO。HDMI®▶ 2025年1月6日,HDMI Forum, Inc. 宣布即将发布HDMI规范2.2版本。新规范将支持更高的分辨率和刷新率,并提供更多高质量选项。更快的96Gbps 带宽可满足数据密集型沉浸式和虚拟应用对传输的要求,如 AR/VR/MR、空间现实和光场显示,以及各种商业应用,如大型数字标牌、医疗成像和
    百佳泰测试实验室 2025-01-16 15:41 155浏览
  • 近期,智能家居领域Matter标准的制定者,全球最具影响力的科技联盟之一,连接标准联盟(Connectivity Standards Alliance,简称CSA)“利好”频出,不仅为智能家居领域的设备制造商们提供了更为快速便捷的Matter认证流程,而且苹果、三星与谷歌等智能家居平台厂商都表示会接纳CSA的Matter认证体系,并计划将其整合至各自的“Works with”项目中。那么,在本轮“利好”背景下,智能家居的设备制造商们该如何捉住机会,“掘金”万亿市场呢?重认证快通道计划,为家居设备
    华普微HOPERF 2025-01-16 10:22 173浏览
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 123浏览
  • 实用性高值得收藏!! (时源芯微)时源专注于EMC整改与服务,配备完整器件 TVS全称Transient Voltage Suppre,亦称TVS管、瞬态抑制二极管等,有单向和双向之分。单向TVS 一般应用于直流供电电路,双向TVS 应用于电压交变的电路。在直流电路的应用中,TVS被并联接入电路中。在电路处于正常运行状态时,TVS会保持截止状态,从而不对电路的正常工作产生任何影响。然而,一旦电路中出现异常的过电压,并且这个电压达到TVS的击穿阈值时,TVS的状态就会
    时源芯微 2025-01-16 14:23 149浏览
  • 一个易用且轻量化的UI可以大大提高用户的使用效率和满意度——通过快速启动、直观操作和及时反馈,帮助用户快速上手并高效完成任务;轻量化设计则可以减少资源占用,提升启动和运行速度,增强产品竞争力。LVGL(Light and Versatile Graphics Library)是一个免费开源的图形库,专为嵌入式系统设计。它以轻量级、高效和易于使用而著称,支持多种屏幕分辨率和硬件配置,并提供了丰富的GUI组件,能够帮助开发者轻松构建出美观且功能强大的用户界面。近期,飞凌嵌入式为基于NXP i.MX9
    飞凌嵌入式 2025-01-16 13:15 188浏览
  • 电竞鼠标应用环境与客户需求电竞行业近年来发展迅速,「鼠标延迟」已成为决定游戏体验与比赛结果的关键因素。从技术角度来看,传统鼠标的延迟大约为20毫秒,入门级电竞鼠标通常为5毫秒,而高阶电竞鼠标的延迟可降低至仅2毫秒。这些差异看似微小,但在竞技激烈的游戏中,尤其在对反应和速度要求极高的场景中,每一毫秒的优化都可能带来致胜的优势。电竞比赛的普及促使玩家更加渴望降低鼠标延迟以提升竞技表现。他们希望通过精确的测试,了解不同操作系统与设定对延迟的具体影响,并寻求最佳配置方案来获得竞技优势。这样的需求推动市场
    百佳泰测试实验室 2025-01-16 15:45 224浏览
  • 随着智慧科技的快速发展,智能显示器的生态圈应用变得越来越丰富多元,智能显示器不仅仅是传统的显示设备,透过结合人工智能(AI)和语音助理,它还可以成为家庭、办公室和商业环境中的核心互动接口。提供多元且个性化的服务,如智能家居控制、影音串流拨放、实时信息显示等,极大提升了使用体验。此外,智能家居系统的整合能力也不容小觑,透过智能装置之间的无缝连接,形成了强大的多元应用生态圈。企业也利用智能显示器进行会议展示和多方远程合作,大大提高效率和互动性。Smart Display Ecosystem示意图,作
    百佳泰测试实验室 2025-01-16 15:37 168浏览
  • 晶台光耦KL817和KL3053在小家电产品(如微波炉等)辅助电源中的广泛应用。具备小功率、高性能、高度集成以及低待机功耗的特点,同时支持宽输入电压范围。▲光耦在实物应用中的产品图其一次侧集成了交流电压过零检测与信号输出功能,该功能产生的过零信号可用于精确控制继电器、可控硅等器件的过零开关动作,从而有效减小开关应力,显著提升器件的使用寿命。通过高度的集成化和先进的控制技术,该电源大幅减少了所需的外围器件数量,不仅降低了系统成本和体积,还进一步增强了整体的可靠性。▲电路示意图该电路的过零检测信号由
    晶台光耦 2025-01-16 10:12 95浏览
  • 故障现象 一辆2007款法拉利599 GTB车,搭载6.0 L V12自然吸气发动机(图1),累计行驶里程约为6万km。该车因发动机故障灯异常点亮进厂检修。 图1 发动机的布置 故障诊断接车后试车,发动机怠速轻微抖动,发动机故障灯长亮。用故障检测仪检测,发现发动机控制单元(NCM)中存储有故障代码“P0300 多缸失火”“P0309 气缸9失火”“P0307 气缸7失火”,初步判断发动机存在失火故障。考虑到该车使用年数较长,决定先使用虹科Pico汽车示波器进行相对压缩测试,以
    虹科Pico汽车示波器 2025-01-15 17:30 95浏览
  • 80,000人到访的国际大展上,艾迈斯欧司朗有哪些亮点?感未来,光无限。近日,在慕尼黑electronica 2024现场,ams OSRAM通过多款创新DEMO展示,以及数场前瞻洞察分享,全面展示自身融合传感器、发射器及集成电路技术,精准捕捉并呈现环境信息的卓越能力。同时,ams OSRAM通过展会期间与客户、用户等行业人士,以及媒体朋友的深度交流,向业界传达其以光电技术为笔、以创新为墨,书写智能未来的深度思考。electronica 2024electronica 2024构建了一个高度国际
    艾迈斯欧司朗 2025-01-16 20:45 141浏览
  • 全球领先的光学解决方案供应商艾迈斯欧司朗(SIX:AMS)近日宣布,与汽车技术领先者法雷奥合作,采用创新的开放系统协议(OSP)技术,旨在改变汽车内饰照明方式,革新汽车行业座舱照明理念。结合艾迈斯欧司朗开创性的OSIRE® E3731i智能LED和法雷奥的动态环境照明系统,两家公司将为车辆内饰设计和功能设立一套全新标准。汽车内饰照明的作用日益凸显,座舱设计的主流趋势应满足终端用户的需求:即易于使用、个性化,并能提供符合用户生活方式的清晰信息。因此,动态环境照明带来了众多新机遇。智能LED的应用已
    艾迈斯欧司朗 2025-01-15 19:00 78浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦