自动驾驶系统最全的系统时间同步方案设计

汽车ECU开发 2022-08-29 08:58

下一代自动驾驶系统需要采用多激光雷达、多毫米波雷达、多摄像头等各类传感器,传感器从采集数据到处理到发送到域控制器内部,存在延时,且延时的时长不稳定。为了提高自动驾驶的传感器融合、决策规划和融合定位等性能,自动驾驶高级域控制器HPC与其关联的传感器均需要做时间同步,实际过程就是需要定义清楚传感器输入数据的时间戳信息(包括打时间戳的时刻及精度要求),同时也需要定义整体时间同步方案和同步精度要求。


概述

要讲清楚时钟同步原理需要首先解释清楚两种时钟同步类型:数据时钟和管理时钟。

首先,整体上是组合惯导提供的UTC时间通过PPS+GPRMC给时间同步服务器授时。该时间同步服务器将相应的时间信息通过PTP协议和中央网关,给各类传感器数据采集主机授时。HPC则需要实现好内部SOC和MCU之间的时间同步过程。


HPC的SOC和MCU之间的数据面时间通过gPTP协议时间同步,其中SOC为主master;

HPC的SOC和MCU之间的管理面时间通过HPC私有协议进行同步,SOC为主Master,通过以太链路进行同步。

SOC和MCU同步过程中,管理时钟和数据时钟都会做同步,数据面用gPTP协议,在其时间同步精度要求250微妙内,管理时钟用私有协议,也通过以太网,精度是10ms。其内部的管理时间和数据面时间就需要对齐,HPC要保证数据时钟的连续性,不允许有异常跳变。因为异常跳变会引起很严重的数据误传和误解析。

每次域控制器冷启动时,域控制器会尝试与提供主时钟的节点持续进行一定时间(该时间可以根据实际情况按需标定)的通信以进行初始同步。如果同步成功,则数据时钟会采用当前管理时间,以同步获取到的绝对时间;对应的驱动程序可以随其启动,并调用对应的应用软件进行运算。如果同步不成功 ,域控制器会一直尝试同步。

HPC与VDC的同步过程

整个同步分类主要包括中央域控制器与网关、各类传感器及执行器之间的同步。HPC的绝对时间通常通过中央网关CGW作为整车所有控制器提供统一时间源,将整体的同步时间戳输出给所有关联的控制器端(如车身域控制器PDC、整车域控制器VDC、座舱域控制器CSC等)。在下一代自动驾驶系统架构中,整车域控制器VDC不仅承担着控制整车执行器端运行的功能,还同时兼任着中央网关CGW的功能,承载着HPC与其他域控制器信息交互和协议转化的功能。

如下图表示了自动驾驶控制器HPC与其关联域控制器的连接关系。


前述讲到VDC可作为中央网关功能,因此以HPC为中心的控制器间同步过程着重在于HPC与VDC之间的同步过程。通过VDC的信息中转可以实现各域控制器之间的同步及通信功能。各控制器主要通过以太网直连,采用基于以太网gPTP协议。HPC与VDC的同步过程需要考虑与HPC直连的GNSS输入绝对时间为主时钟,该时间误差比较小(通常在10ms内)。考虑智驾大数据云端分析精度,及 gPTP协议精度通常要求在250微妙内,HPC和VDC定周期可采用其整数倍精度(如125毫秒)做同步。

HPC局部网络节点的同步过程

HPC局部网络节点同步过程是指其与传感器之间的同步过程。在自动驾驶私有内部网络均以域控制器为主节点Master,采用其相应的数据端时间做时间源。HPC通过局部内网单独给传感器(激光雷达、毫米波雷达、行车摄像头、环视摄像头和组合惯导等)提供统一时间源。过程中,分别通过以太网连接激光雷达、组合惯导(预留1PPS),同时通过CANFD/以太网连接毫米波雷达、超声波盒子PDC,通过GSML/LVDS连接摄像头(包含行车/环视摄像头)。该类不同的网络连接形式均作为从节点与网关做时间同步。

其中主要包含三大传感器如下:

  • 视觉传感器:以行车控制和泊车控制的摄像头进行区分。

行车摄像头主要包括前视摄像头、侧视摄像头、后视摄像头为代表,泊车摄像头主要指环视摄像头;采用集中式方案后的摄像头通常不再是一体机,而是简单的传感器而已,输入的是原始图像。

HPC和摄像头通过视频数据线缆如GSML或LVDS进行数据传输,HPC利用其数据时钟(即系统时间,非绝对时间)作为时间源,定时发送触发信号Trigger Signal给摄像头,摄像头基于实时触发信号调整曝光时刻。由于单相机内无法直接记录对应的时间戳,因此使用多相机同步触发的方式进行同步,并以记录域控内的触发信号的时刻作为图像的初始时间戳。

摄像头其成像中间(如下计算方式)时刻打时间戳,且时间精度要求在10ms内。
Tmidtime成像中间=Ttrigger(触发时刻)+1/2*Texposure(曝光时间);
如上公式中曝光时间是固定的。

由于触发时刻位于整帧图像的曝光末尾,为了提高时间戳的精度,需要对曝光时长进行补偿以获取中间行曝光结束点时刻,来代表整帧图像的曝光中间时刻;通常采用如下公式进行时间补偿。

Tcompensate(补偿时间)=每行长度×总行数/2

 域控制器记录时刻包括如下5个时刻:摄像头成像中间时刻、图像进感知模块的时刻、图像感知结果进融合模块的时刻、感知融合结果发送时间、下游模块接收时刻。


  • 激光雷达:当前主要利用的是半固态激光雷达。

HPC和激光雷达通常也是基于以太网gPTP协议结合千兆以太网直连,HPC为主节点Master,激光雷达为从节点Slave。HPC同步时间源采用的是绝对时间(即系统时间)作为数据时钟,时间同步精度要求仍旧是250微妙内。HPC和激光雷达采用同步时间精度的整数倍周期(比如可以是125毫秒、也可以是250ms)做同步,激光雷达需要按照该同步过程实时更新时间。此外,激光雷达需要在发出每帧点云中每个点的时间作为传感器打时间戳的时刻要求(精度要求为1ms内)。

同样,域控制器需要基于激光雷达返回时间记录激光点云发送点时刻(即激光雷达在接收到反射信号时可以记录到每个点的时刻);输入域控制器时间戳(通常此时激光雷达已带有相应的时间信息,HPC则不用再打时间戳);激光感知模块时间戳(一般则由激光雷达供应商进行原始点云信息处理,如果是集中式方案则由HPC中的SOC负责进行前端点云感知,并由专有的SOC进行感知后端融合);感知结果带上时间戳发送给下游模块接收;且此时需要打上最后一个时间戳。域控制器的数据时钟针对激光点云感知而言主要用于感知算法设计(这类算法可以是车端,也可以是云端),而绝对时间主要涉及本地时间,主要用于数据记录和存储业务。


  • 毫米波雷达:主要指前毫米波雷达、角毫米波雷达。

通常前毫米波雷达单独对信息进行同步,而角毫米波雷达群本身会存在一个主雷达对其所有的信息进行进一步过程同步。通常以上一代自动驾驶来说,毫米波雷达输入数据通常采用的是目标级数据,而下一代域控制器采用集中式方案后,对于将3D毫米波雷达更新换代为4D毫米波雷达,即直接处理毫米波雷达点云的呼声越来越高。这个过程中,毫米波雷达不再具备计算单元,而是简单输入点云数据。但由于毫米波雷达的微波信号处理仍旧存在较高的难度,对于下一代自动驾驶系统来说,很多OEM仍旧采用目标级数据进行直连,时间同步精度通常要求叫激光雷达更加宽泛些,通常为1ms以内。点云毫米波雷达发出和收到回波的中间时刻作为标记打上时间戳,要求精度1ms内。

同时,HPC和毫米波雷达通过设定1-2秒的周期间隔进行同步,该时间段内毫米波雷达实时更新对应的时间。同样的,域控制器基于毫米波雷达返回时间支持记录包含以下五个时刻的时间戳:

回波反射点生成时间戳、回波输入至域控制器时间戳(当然对于目标级数据记录,其毫米波雷达已带时间戳信息,华为不再打时间戳);毫米波雷达输出的目标物信息是由原始反射点聚类过滤得到,为了获取更加精准的时间戳,通常需要获得原始反射点生成时刻的时间戳,如下图红色部分。


感知结果发送专门SOC/MCU并与其他传感器做大融合时间戳。同样的,域控制器的数据时间(或本地时间)用于算法设计运行,而绝对时间用于数据记录和存储业务。

HPC需要对智能camera和radar的报文需额外打上对应报文进入时刻的时间戳,对数据进感知模块时刻打时间戳,作为备份使用与毫米波雷达确认,尤其角雷达,通过时间同步信息才能确定角雷达是否可发出目标。

  • 组合惯导/独立惯导系统

下一代自动驾驶系统中,不同的OEM对于惯导使用的类型有所不同,通常根据其自研能力分为组合惯导和独立惯导两种类型。由于组合惯导内置卫惯组合算法,根据实际应用情况,这里我们只针对较为简单的组合惯导的直连进行说明。HPC作为主节点Master而组合惯导为从节点,通过100兆以太网与组合惯导直连。其中,以太网仍旧是基于gPTP协议进行的。HPC同步时间源仍旧采用数据时钟(即系统时间,非绝对时间)进行同步。要求时间同步精度要求:250微妙内,同步周期为同步精度要求的整数倍时间间隔(如1毫秒或125毫秒)。其间,组合惯导根据RTK和IMU信息基于最近一次IMU采样,打时间戳。其精度限制在1ms内。

此外,IMU的采样时刻、进入HPC时刻、进入后端融合模块这三个时刻均会被打上时间戳。

HPC外部网络节点的时间同步过程

除开内部网路节点时间同步外,对于下一代自动驾驶系统来说,其与相关联的执行器之间(如集成制动控制系统EPBi、电子转向系统EPS、动力控制系统VCU)均存在大量外部信息交互。参考阶段性集中控制方式,这类整车控制端口通常通过整车控制器VDC进行连接和同步控制。如前述,VDC实际亦可看成中央网关,除开对各类域控制器的信息转发外,其还承担着整个同步时间戳的定义和发送。因为对于整车系统,整个绝对时间是自动驾驶系统的域控制器HPC连接的GNSS/GPS所获得的。

关联系统通常是通过整车域控端口(VDC)进行单独的时间同步控制,因此HPC和ESP、EPS、VCU之间通常是不存在直接的主从节点这类型的时间同步关系,而是在执行指令过程中直接将各自时间戳发送给VDC控制器,在执行过程中进行时间对齐即可。

HPC安全冗余控制过程中的时间同步过程

对于整个自动驾驶系统来说,在时间同步过程中仍旧需要考虑相应的失效控制逻辑。考虑到其内所包含的AI芯片SOC和逻辑芯片MCU所承载的不同的功能。通常在两者出现故障的不同时刻会存在一定程度的功能降级。这类功能降级我们称之为局部功能降级。局部功能降级期间,若部分SOC失效时,MCU通过晶振维护时间和传感器做同步。期间,仍可接收Radar及其余SOC传递过来的摄像头目标数据信息,并保持输出时间戳的稳定。因此,可以说局部功能降级后系统在短时间内仍旧使用原时间戳做应对,MCU仍可保持原时间数据稳定(其时间同步过程可参照MCU中的管里面时钟进行),支持功能的运行。因为短时间内误差很小,所以该时间内不做时间同步风险也很小。


当然,如果整个HPC失效,则需要另外一个备份控制器(可以是另外一个低配版本的HPC,也可以是额外增加的智能摄像头Smart Camera)进行安全控制。此过程中,则需要重新建立该备份控制器与对应传感器之间的时间同步关系。

另外一种失效模式为供电失效引起的功能降级。这里需要说明,域控制器存在两种睡眠模式:深度睡眠和浅度睡眠。该睡眠模式主要与是否掐断整体供电有关。如果控制器处于深睡眠,则数据时钟直接使用上一次下电时存储的管理时钟,不再进行重新计时。如果控制器处于浅睡眠,则直接利用本次下电的管理时钟进行计时。相对于深度睡眠来说,浅睡眠同步的时钟结果更加准确。当然无论睡眠深浅,该时间段内控制器时钟始终是无效的,且各软件均无法正常运行。当然,由于整个浅睡眠转化到深睡眠的时间是可以自定义的(如12小时)。

总结

本文详细的讲解了下一代自动驾驶系统的各个控制单元的时间同步原理,并对同步过程中的各个模块提出了精度要求,涉及局部网络节点同步、全局网络节点同步。其中,局部网络节点同步主要是针对自动驾驶系统内部的传感器与域控之间的同步关系。全局网络节点同步主要是针对自动驾驶系统与外部关联系统(如控制制动、转向、动力、车门、车灯、网关等)进行的时间同步关系。对于整体计算精度而言,局部网络节点同步是至关重要的,因为涉及的传感器单元比较多,需要各自针对自身实际情况打上对应的时间戳,并最终由域控进行总同步。全局网络节点同步则实际参照各分域控与HPC之间的信息交互简单的进行时间信息交换即可。这里需要注意的是,整体系统的绝对时间均来自于GNSS系统,通常可由HPC或CSC进行连接输入。

推荐阅读
丰田自动驾驶系统TAD的技术细节
谈谈整车OTA系统的理解
五千字说清汽车基础软件及国产现状
带不带功能安全(IS26262)的区别,功能安全要做啥?
谈谈simulink自动代码生成
浅谈电机控制器及其功能
谈谈Bootloader自更新
电子电气架构设计需要考虑哪些方面?
汽车E/E架构的网络安全分析
深度解读汽车域控制器
自动驾驶域控制器信息梳理
深度分析整车控制域现状与发展

分享不易,恳请点个【👍】和【在看】

汽车ECU开发 专注于汽车电子ECU软件开发,技术分享。
评论
  • 戴上XR眼镜去“追龙”是种什么体验?2024年11月30日,由上海自然博物馆(上海科技馆分馆)与三湘印象联合出品、三湘印象旗下观印象艺术发展有限公司(下简称“观印象”)承制的《又见恐龙》XR嘉年华在上海自然博物馆重磅开幕。该体验项目将于12月1日正式对公众开放,持续至2025年3月30日。双向奔赴,恐龙IP撞上元宇宙不久前,上海市经济和信息化委员会等部门联合印发了《上海市超高清视听产业发展行动方案》,特别提到“支持博物馆、主题乐园等场所推动超高清视听技术应用,丰富线下文旅消费体验”。作为上海自然
    电子与消费 2024-11-30 22:03 75浏览
  • 光耦合器作为关键技术组件,在确保安全性、可靠性和效率方面发挥着不可或缺的作用。无论是混合动力和电动汽车(HEV),还是军事和航空航天系统,它们都以卓越的性能支持高要求的应用环境,成为现代复杂系统中的隐形功臣。在迈向更环保技术和先进系统的过程中,光耦合器的重要性愈加凸显。1.混合动力和电动汽车中的光耦合器电池管理:保护动力源在电动汽车中,电池管理系统(BMS)是最佳充电、放电和性能监控背后的大脑。光耦合器在这里充当守门人,将高压电池组与敏感的低压电路隔离开来。这不仅可以防止潜在的损坏,还可以提高乘
    腾恩科技-彭工 2024-11-29 16:12 119浏览
  • 在电子技术快速发展的今天,KLV15002光耦固态继电器以高性能和强可靠性完美解决行业需求。该光继电器旨在提供无与伦比的电气隔离和无缝切换,是现代系统的终极选择。无论是在电信、工业自动化还是测试环境中,KLV15002光耦合器固态继电器都完美融合了效率和耐用性,可满足当今苛刻的应用需求。为什么选择KLV15002光耦合器固态继电器?不妥协的电压隔离从本质上讲,KLV15002优先考虑安全性。输入到输出隔离达到3750Vrms(后缀为V的型号为5000Vrms),确保即使在高压情况下,敏感的低功耗
    克里雅半导体科技 2024-11-29 16:15 119浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 63浏览
  • 随着航空航天技术的迅猛发展,航空电子网络面临着诸多挑战,如多网络并行传输、高带宽需求以及保障数据传输的确定性等。为应对这些挑战,航空电子网络急需一个通用的网络架构,满足布线简单、供应商多、组网成本相对较低等要求。而以太网技术,特别是TSN(时间敏感网络)的出现,为航空电子网络带来了新的解决方案。本文将重点介绍TSN流识别技术在航空电子网络中的应用,以及如何通过适应航空电子网络的TSN流识别技术实现高效的航空电子网络传输。一、航空电子网络面临的挑战航空航天业专用协议包括AFDX、ARINC等,这些
    虹科工业智能互联 2024-11-29 14:18 100浏览
  • 在现代科技浪潮中,精准定位技术已成为推动众多关键领域前进的核心力量。虹科PCAN-GPS FD 作为一款多功能可编程传感器模块,专为精确捕捉位置和方向而设计。该模块集成了先进的卫星接收器、磁场传感器、加速计和陀螺仪,能够通过 CAN/CAN FD 总线实时传输采样数据,并具备内部存储卡记录功能。本篇文章带你深入虹科PCAN-GPS FD的技术亮点、多场景应用实例,并展示其如何与PCAN-Explorer6软件结合,实现数据解析与可视化。虹科PCAN-GPS FD虹科PCAN-GPS FD的数据处
    虹科汽车智能互联 2024-11-29 14:35 149浏览
  • 学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&
    youyeye 2024-11-30 14:30 65浏览
  • 国产光耦合器正以其创新性和多样性引领行业发展。凭借强大的研发能力,国内制造商推出了适应汽车、电信等领域独特需求的专业化光耦合器,为各行业的技术进步提供了重要支持。本文将重点探讨国产光耦合器的技术创新与产品多样性,以及它们在推动产业升级中的重要作用。国产光耦合器创新的作用满足现代需求的创新模式新设计正在满足不断变化的市场需求。例如,高速光耦合器满足了电信和数据处理系统中快速信号传输的需求。同时,栅极驱动光耦合器支持电动汽车(EV)和工业电机驱动器等大功率应用中的精确高效控制。先进材料和设计将碳化硅
    克里雅半导体科技 2024-11-29 16:18 161浏览
  • 《高速PCB设计经验规则应用实践》+PCB绘制学习与验证读书首先看目录,我感兴趣的是这一节;作者在书中列举了一条经典规则,然后进行详细分析,通过公式推导图表列举说明了传统的这一规则是受到电容加工特点影响的,在使用了MLCC陶瓷电容后这一条规则已经不再实用了。图书还列举了高速PCB设计需要的专业工具和仿真软件,当然由于篇幅所限,只是介绍了一点点设计步骤;我最感兴趣的部分还是元件布局的经验规则,在这里列举如下:在这里,演示一下,我根据书本知识进行电机驱动的布局:这也算知行合一吧。对于布局书中有一句:
    wuyu2009 2024-11-30 20:30 88浏览
  • By Toradex胡珊逢简介嵌入式领域的部分应用对安全、可靠、实时性有切实的需求,在诸多实现该需求的方案中,QNX 是经行业验证的选择。在 QNX SDP 8.0 上 BlackBerry 推出了 QNX Everywhere 项目,个人用户可以出于非商业目的免费使用 QNX 操作系统。得益于 Toradex 和 QNX 的良好合作伙伴关系,用户能够在 Apalis iMX8QM 和 Verdin iMX8MP 模块上轻松测试和评估 QNX 8 系统。下面将基于 Apalis iMX8QM 介
    hai.qin_651820742 2024-11-29 15:29 151浏览
  • 艾迈斯欧司朗全新“样片申请”小程序,逾160种LED、传感器、多芯片组合等产品样片一触即达。轻松3步完成申请,境内免费包邮到家!本期热荐性能显著提升的OSLON® Optimal,GF CSSRML.24ams OSRAM 基于最新芯片技术推出全新LED产品OSLON® Optimal系列,实现了显著的性能升级。该系列提供五种不同颜色的光源选项,包括Hyper Red(660 nm,PDN)、Red(640 nm)、Deep Blue(450 nm,PDN)、Far Red(730 nm)及Ho
    艾迈斯欧司朗 2024-11-29 16:55 157浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 57浏览
  • 学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&
    youyeye 2024-11-29 14:30 118浏览
  • 国产光耦合器因其在电子系统中的重要作用而受到认可,可提供可靠的电气隔离并保护敏感电路免受高压干扰。然而,随着行业向5G和高频数据传输等高速应用迈进,对其性能和寿命的担忧已成为焦点。本文深入探讨了国产光耦合器在高频环境中面临的挑战,并探索了克服这些限制的创新方法。高频性能:一个持续关注的问题信号传输中的挑战国产光耦合器传统上利用LED和光电晶体管进行信号隔离。虽然这些组件对于标准应用有效,但在高频下面临挑战。随着工作频率的增加,信号延迟和数据保真度降低很常见,限制了它们在电信和高速计算等领域的有效
    腾恩科技-彭工 2024-11-29 16:11 106浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 62浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦