基于多LiDAR城市自动驾驶定位与地图构建方案解读

智驾最前沿 2023-11-30 08:20
--关注星标、回复“SOA”--
↓↓免费领取:面向智能车辆开发的开放性SOA方案↓↓

自动驾驶车辆需要准确且稳健的定位和地图构建算法,以在城市环境中安全可靠地导航。

本文提出了一种基于LiDAR传感器的离线地图构建和在线定位的新型传感器融合方案,所提出的方法利用了四个LiDAR传感器,地图构建和定位算法基于KISS-ICP,具有实时性能和高精度。介绍了一种生成语义地图的方法,用于驾驶任务,如路径规划。所呈现的方案已集成到基于ROS 2的Autoware软件栈中,为自动驾驶应用提供了稳健而灵活的环境。展示了该方案在给定的研究车辆和实际自动驾驶应用中优于最先进的方法。


介绍

稳健而准确的定位在城市自动驾驶领域起着核心作用,特别是在周围建筑物高耸的城市区域,需要具有不仅依赖全球导航卫星系统(GNSS)的定位系统,这就是同步定位与地图构建(SLAM)问题发挥作用的地方,解决SLAM任务的首选传感器是LiDAR传感器,在自动驾驶的背景中得到了广泛应用,规划轨迹并在这些地图环境中行驶需要额外的语义地图,包括车道信息。

激光雷达相关工作

LiDAR SLAM: 过去几年中,LiDAR SLAM方法在不同的方法中展现了令人信服的结果。一些表现最佳的算法包括LOAM、MULLS和CT-ICP。KISS-ICP算法是一种迭代最近点(ICP)方法,侧重于易于适应。它保证可以在多种应用和用例中立即有效地工作,并且是为实时和实际应用而开发的。然而KISS-ICP是一种针对LiDAR测距算法,因此不提供循环闭合或后端优化。

多LiDAR定位:一些工作已经处理了多LiDAR系统及其附加挑战。与单一LiDAR的主要区别在于传感器时钟的空间校准和时间同步至关重要,M-LOAM是LOAM的扩展,它添加了多LiDAR支持,还具有在线校准的能力。其他方案侧重于LiDAR-LiDAR校准,这对于融合来自不同传感器的点云至关重要。

自动驾驶车辆(AVs)的地图制作:除了3D点云地图外,大多数自动驾驶软件堆栈都基于提供语义信息的高精(HD)地图。一个挑战是在规模上生成这些地图并保持其更新。语义地图的方法可以是基于深度学习的,也可以是基于传统算法的,Lanelet2是一种广泛使用的车道级地图格式。

车辆配置

用于实现这项工作的自动研究车辆EDGAR(图1)具有四个LiDAR,其中包括两个Innovusion Falcon Kinetic,用于前后的远距离,以及两个Ouster OS1-128,倾斜20度放置在车辆两侧,以覆盖车辆周围的近中距离。

图1:用于研究的车辆EDGAR

图2显示了LiDAR的视场(FOV),相对较多的LiDAR数量是作为整体车辆概念的一部分选择的,以在城市和拥挤区域中安全驾驶,避免与许多近距离的物体(如行人)发生碰撞。

图2:EDGAR LiDAR的鸟瞰视角中的视场

因此定位模块必须融合LiDAR数据,以实现可靠且稳健的定位,在具有GNSS覆盖范围的区域进行参考定位时,可以使用RTK校正的差分GNSS系统。表I列出了相关的硬件组件。


内容概述

整体流程如图3所示。在对原始数据进行预处理后,我们离线构建了一个3D点云地图和语义地图,并将其参照GNSS轨迹,在线使用点云地图通过扫描配准来定位车辆,一个扩展卡尔曼滤波器(EKF)融合了所有信息并输出高频自身状态,该流程集成到基于Autoware1软件栈的自定义ROS2环境中。

图3:介绍的多激光雷达定位和建图方案概述

传感器融合

传感器融合策略对流程的性能至关重要。在处理点云之前,会应用预处理步骤,如体素滤波,以减少数据量。此外,必须进行去畸变校正,以减少LiDAR扫描的运动模糊。许多问题源于传感器数据的空间校准或时间同步的不准确性。

为了最小化这些问题,我们为每个LiDAR扫描运行单独的配准,而不是在配准之前融合所有点云。首先将每个扫描转换成一个联合框架,然后与地图匹配,通过这种方式,我们无需关心单个扫描之间的时间差异,也可以轻松补偿校准误差。

地图构建

地图构建流程包括3D点云地图和语义地图方法,用于提取车道级别的信息。

点云地图:为选择地图方法,评估了先前提到的SLAM算法,由于非典型的LiDAR配置和上述一些挑战,一些LiDAR SLAM算法未能创建一致的地图,这里采用分离帧扫描配准的KISS-ICP在地图创建方面表现出稳健的行为,地图经过交互式SLAM后处理。该框架允许在轨迹沿途的个别姿势基础上执行回环闭合和图优化。

语义地图:路径和行为规划需要语义地图,语义地图流程的目标是尽可能自动化,然而仍然需要手动语义地图流程来纠正错误标记的部分并生成地面实况数据,对于手动语义地图,使用Vector Map Builder2。通过标记车道边界等手动标注点云地图,正在开发自动语义地图流程以实现更好的可扩展性。点云地图经过基于强度的过滤,以提取白色道路标线。使用沿驾驶轨迹的滑动窗口方法检测路沿带。

这两个基本的道路边界元素在先验语义地图中融合,在没有线和路沿带的情况下,语义信息用于提取道路边界。因此在构建点云地图之前,通过将LiDAR扫描投影到分段的2D摄像机图像中,为它们涂上语义标签。由于多LiDAR设置,先进的3D LiDAR分割算法效果不佳。然后,将被分割为道路的区域边界与现有的语义车道地图融合。自动语义地图流程在图4中可视化。

图4:从激光雷达点云和语义图像中提取语义街道图

地理参考:由于在地图构建过程中未使用GNSS,因此必须对地图进行地理参考以允许在定位期间使用GNSS,经过UTM投影到本地笛卡尔坐标后,使用Umeyama算法粗略对齐轨迹,手动选择每个轨迹的一定数量的对应控制点。基于这些点云使用linear rubber sheet transformation 来匹配轨迹。然后将这些变换应用于地图。投影到全球坐标提供了地理参考的地图,这还使得可以使用来自OpenStreetMap的信息对语义地图进行自动丰富和评估。请注意,linear rubber sheet变换仅在2D中起作用。

在线定位

根据地图构建的结果,定位也基于KISS-ICP,因此该算法已经被扩展。在定位模式中,标准实现中使用的局部地图被先前创建的点云地图替换,以实现可靠的无漂移定位。此外算法可以使用外部状态估计器的估计值对点云配准的初始姿势进行估计。基于Autoware实施了一个基于扩展卡尔曼滤波器(EKF)的方案,用于融合LiDAR配准、GNSS、IMU、轮速信息和车辆动力学模型的假设。


实验

结果

所提出的流程使得能够创建用于自动驾驶的准确且详细的高精晰度地图,由KISS-ICP离线创建的地图显示出在配准的点云帧之间具有高一致性。然而在整个轨迹的长度上积累了大量的漂移。在交互式SLAM中的后处理可以显著减小绝对位置误差(APE)。在我们的示例中(图5),APE的均方根误差(RMSE)从12.7米减小到3.6米。

图5:KISS-ICP轨迹的APE(a)和通过交互式SLAM后处理的轨迹(b)

这使得可以利用GNSS的绝对位置,结合LiDAR配准的相对估计用于定位。图6显示了使用所提出的流程生成的点云地图。

图6:在TUM Campus Garching生成的点云地图的局部截图

讨论

尽管在创建地图和定位方面取得了良好的结果,并且在定位方面采用了强大的方法,但我们的流程仍然存在缺点。单个LiDAR传感器的配准可以补偿同步和外参校准误差,但它会导致轨迹嘈杂,因为姿势会在校准不良的传感器帧之间跳跃,附加的计算要求将需要更详细地研究。

我们的地理参考依赖于参考轨迹,这需要可靠的GNSS信号,结果的精度直接取决于外部位置信号的标准差。此外语义信息提取的性能强烈依赖于所选择的场景,由于缺乏标记数据,目前无法对真实世界数据进行全面的量化,该流程仅在TUM校园周围的有限环境中进行了测试,为更好地评估整个流程的稳健性,有必要对各种真实世界场景进行评估。


总结

在这项工作中,我们提出了一种用于AV多LiDAR建图和定位的流程,与最先进的SLAM算法相比,我们对传感器融合和分离的LiDAR配准的方法已经证明是有效的,通过对点云地图进行后处理进一步改善了结果并将其与全球参考坐标系关联起来。

展示了如何合并不同的数据源以向地图添加语义层,在静态地图中使用多模态定位,即使在GNSS受阻的城市道路交通中,也能实现可靠的定位。为了提高方法的稳健性和准确性,将开发一种在线多LiDAR校准方法,此外,需要进行更全面的评估,以充分量化我们的方法。

转载自点云PLC,文中观点仅供分享交流,不代表本公众号立场,如涉及版权等问题,请您告知,我们将及时处理。

-- END --

智驾最前沿 「智驾最前沿」深耕自动驾驶领域技术、资讯等信息,解读行业现状、紧盯行业发展、挖掘行业前沿,致力于助力自动驾驶发展与落地!公众号:智驾最前沿
评论 (0)
  • UNISOC Miracle Gaming奇迹手游引擎亮点:• 高帧稳帧:支持《王者荣耀》等主流手游90帧高画质模式,连续丢帧率最高降低85%;• 丝滑操控:游戏冷启动速度提升50%,《和平精英》开镜开枪操作延迟降低80%;• 极速网络:专属游戏网络引擎,使《王者荣耀》平均延迟降低80%;• 智感语音:与腾讯GVoice联合,弱网环境仍能保持清晰通话;• 超高画质:游戏画质增强、超级HDR画质、游戏超分技术,优化游戏视效。全球手游市场规模日益壮大,游戏玩家对极致体验的追求愈发苛刻。紫光展锐全新U
    紫光展锐 2025-05-07 17:07 199浏览
  • Matter协议是一个由Amazon Alexa、Apple HomeKit、Google Home和Samsung SmartThings等全球科技巨头与CSA联盟共同制定的开放性标准,它就像一份“共生契约”,能让原本相互独立的家居生态在应用层上握手共存,同时它并非另起炉灶,而是以IP(互联网协议)为基础框架,将不同通信协议下的家居设备统一到同一套“语义规则”之下。作为应用层上的互通标准,Matter协议正在重新定义智能家居行业的运行逻辑,它不仅能向下屏蔽家居设备制造商的生态和系统,让设备、平
    华普微HOPERF 2025-05-08 11:40 98浏览
  • 随着智能驾驶时代到来,汽车正转变为移动计算平台。车载AI技术对存储器提出新挑战:既要高性能,又需低功耗和车规级可靠性。贞光科技代理的紫光国芯车规级LPDDR4存储器,以其卓越性能成为国产芯片产业链中的关键一环,为智能汽车提供坚实的"记忆力"支持。作为官方授权代理商,贞光科技通过专业技术团队和完善供应链,让这款国产存储器更好地服务国内汽车厂商。本文将探讨车载AI算力需求现状及贞光科技如何通过紫光国芯LPDDR4产品满足市场需求。 车载AI算力需求激增的背景与挑战智能驾驶推动算力需求爆发式
    贞光科技 2025-05-07 16:54 150浏览
  • 后摄像头是长这个样子,如下图。5孔(D-,D+,5V,12V,GND),说的是连接线的个数,如下图。4LED,+12V驱动4颗LED灯珠,给摄像头补光用的,如下图。打开后盖,发现里面有透明白胶(防水)和白色硬胶(固定),用合适的工具,清理其中的胶状物。BOT层,AN3860,Panasonic Semiconductor (松下电器)制造的,Cylinder Motor Driver IC for Video Camera,如下图。TOP层,感光芯片和广角聚焦镜头组合,如下图。感光芯片,看着是玻
    liweicheng 2025-05-07 23:55 109浏览
  • 这款无线入耳式蓝牙耳机是长这个样子的,如下图。侧面特写,如下图。充电接口来个特写,用的是卡座卡在PCB板子上的,上下夹紧PCB的正负极,如下图。撬开耳机喇叭盖子,如下图。精致的喇叭(HY),如下图。喇叭是由电学产生声学的,具体结构如下图。电池包(AFS 451012  21 12),用黄色耐高温胶带进行包裹(安规需求),加强隔离绝缘的,如下图。451012是电池包的型号,聚合物锂电池+3.7V 35mAh,详细如下图。电路板是怎么拿出来的呢,剪断喇叭和电池包的连接线,底部抽出PCB板子
    liweicheng 2025-05-06 22:58 354浏览
  • 某国产固态电解的2次和3次谐波失真相当好,值得一试。(仅供参考)现在国产固态电解的性能跟上来了,值得一试。当然不是随便搞低端的那种。电容器对音质的影响_电子基础-面包板社区  https://mbb.eet-china.com/forum/topic/150182_1_1.html (右键复制链接打开)电容器对音质的影响相当大。电容器在音频系统中的角色不可忽视,它们能够调整系统增益、提供合适的偏置、抑制电源噪声并隔离直流成分。然而,在便携式设备中,由于空间、成本的限
    bruce小肥羊 2025-05-04 18:14 240浏览
  • 多功能电锅长什么样子,主视图如下图所示。侧视图如下图所示。型号JZ-18A,额定功率600W,额定电压220V,产自潮州市潮安区彩塘镇精致电子配件厂,铭牌如下图所示。有两颗螺丝固定底盖,找到合适的工具,拆开底盖如下图所示。可见和大部分市场的加热锅一样的工作原理,手绘原理图,根据原理图进一步理解和分析。F1为保险,250V/10A,185℃,CPGXLD 250V10A TF185℃ RY 是一款温度保险丝,额定电压是250V,额定电流是10A,动作温度是185℃。CPGXLD是温度保险丝电器元件
    liweicheng 2025-05-05 18:36 276浏览
  • 2024年初,OpenAI公布的Sora AI视频生成模型,震撼了国产大模型行业。随后国产厂商集体发力视频大模型,快手发布视频生成大模型可灵,字节跳动发布豆包视频生成模型,正式打响了国内AI视频生成领域第一枪。众多企业匆忙入局,只为在这片新兴市场中抢占先机,却往往忽视了技术成熟度与应用规范的打磨。以社交平台上泛滥的 AI 伪造视频为例,全红婵家人被恶意仿冒博流量卖货,明星们也纷纷中招,刘晓庆、张馨予等均曾反馈有人在视频号上通过AI生成视频假冒她。这些伪造视频不仅严重侵犯他人权
    用户1742991715177 2025-05-05 23:08 89浏览
  • 二位半 5线数码管的驱动方法这个2位半的7段数码管只用5个管脚驱动。如果用常规的7段+共阳/阴则需要用10个管脚。如果把每个段看成独立的灯。5个管脚来点亮,任选其中一个作为COM端时,另外4条线可以单独各控制一个灯。所以实际上最多能驱动5*4 = 20个段。但是这里会有一个小问题。如果想点亮B1,可以让第3条线(P3)置高,P4 置低,其它阳极连P3的灯对应阴极P2 P1都应置高,此时会发现C1也会点亮。实际操作时,可以把COM端线P3设置为PP输出,其它线为OD输出。就可以单独控制了。实际的驱
    southcreek 2025-05-07 15:06 236浏览
  • ‌一、高斯计的正确选择‌1、‌明确测量需求‌‌磁场类型‌:区分直流或交流磁场,选择对应仪器(如交流高斯计需支持交变磁场测量)。‌量程范围‌:根据被测磁场强度选择覆盖范围,例如地球磁场(0.3–0.5 G)或工业磁体(数百至数千高斯)。‌精度与分辨率‌:高精度场景(如科研)需选择误差低于1%的仪器,分辨率需匹配微小磁场变化检测需求。2、‌仪器类型选择‌‌手持式‌:便携性强,适合现场快速检测;‌台式‌:精度更高,适用于实验室或工业环境。‌探头类型‌:‌横向/轴向探头‌:根据磁场方向选择,轴向探头适合
    锦正茂科技 2025-05-06 11:36 395浏览
  • 5小时自学修好BIOS卡住问题  更换硬盘故障现象:f2、f12均失效,只有ESC和开关机键可用。错误页面:经过AI的故障截图询问,确定是机体内灰尘太多,和硬盘损坏造成,开机卡在BIOS。经过亲手拆螺丝和壳体、排线,跟换了新的2.5寸硬盘,故障排除。理论依据:以下是针对“5小时自学修好BIOS卡住问题+更换硬盘”的综合性解决方案,结合硬件操作和BIOS设置调整,分步骤说明:一、判断BIOS卡住的原因1. 初步排查     拔掉多余硬件:断开所有外接设备(如
    丙丁先生 2025-05-04 09:14 118浏览
  • 浪潮之上:智能时代的觉醒    近日参加了一场课题的答辩,这是医疗人工智能揭榜挂帅的国家项目的地区考场,参与者众多,围绕着医疗健康的主题,八仙过海各显神通,百花齐放。   中国大地正在发生着激动人心的场景:深圳前海深港人工智能算力中心高速运转的液冷服务器,武汉马路上自动驾驶出租车穿行的智慧道路,机器人参与北京的马拉松竞赛。从中央到地方,人工智能相关政策和消息如雨后春笋般不断出台,数字中国的建设图景正在智能浪潮中徐徐展开,战略布局如同围棋
    广州铁金刚 2025-04-30 15:24 387浏览
  • 想不到短短几年时间,华为就从“技术封锁”的持久战中突围,成功将“被卡脖子”困境扭转为科技主权的主动争夺战。众所周知,前几年技术霸权国家突然对华为发难,导致芯片供应链被强行掐断,海外市场阵地接连失守,恶意舆论如汹涌潮水,让其瞬间陷入了前所未有的困境。而最近财报显示,华为已经渡过危险期,甚至开始反击。2024年财报数据显示,华为实现全球销售收入8621亿元人民币,净利润626亿元人民币;经营活动现金流为884.17亿元,同比增长26.7%。对比来看,2024年营收同比增长22.42%,2023年为7
    用户1742991715177 2025-05-02 18:40 211浏览
  • 文/郭楚妤编辑/cc孙聪颖‍相较于一众措辞谨慎、毫无掌舵者个人风格的上市公司财报,利亚德的财报显得尤为另类。利亚德光电集团成立于1995年,是一家以LED显示、液晶显示产品设计、生产、销售及服务为主业的高新技术企业。自2016年年报起,无论业绩优劣,董事长李军每年都会在财报末尾附上一首七言打油诗,抒发其对公司当年业绩的感悟。从“三年翻番顺大势”“智能显示我第一”“披荆斩棘幸从容”等词句中,不难窥见李军的雄心壮志。2012年,利亚德(300296.SZ)在深交所创业板上市。成立以来,该公司在细分领
    华尔街科技眼 2025-05-07 19:25 173浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦