大疆等基于双目,行泊共用鱼眼视觉的低成本高阶智能驾驶方案

原创 Vehicle 2023-10-15 21:02
最近大疆智能驾驶搭载十万元级的五菱云朵上市,提供高速,城区真“无图”领航辅助,记忆泊车,记忆行车等高阶智能驾驶的新闻重新击穿了智能驾驶车型价格的底线;国内其他带有高阶智能驾驶辅助功能的品牌,例如小鹏汽车华为 ADS2.0等,除了硬件配置豪华之外,算力也是上百TOPS起步,但大疆此套采用德州仪器TDA4 32TOPs的方案也将大算力神话拉下马
另外大疆车载订购德州仪器数百万颗TDA4芯片的新闻,也让人不禁遐想这个可以装配大几十万台高阶智能驾驶的量,是要开启了阶智能驾驶科技平权的时代
可以看到智能驾驶开启普及,而且已经不再是高价格汽车的专利,未来智能驾驶将会平民化,价格也趋近大家可以接受的局面。
所以本文将分析下:
  • 大疆的低成本方案大概覆盖哪些智能驾驶功能
  • 大疆的低成本方案的技术路线
  • 类似低成本玩家以及趋势
试图是探讨大疆的低成本高阶智能驾驶方案能实现哪些功能?采用什么技术?玩家以及趋势。
大疆的低成本智能驾驶方案的功能
根据大疆官方发布的信息,大疆将此套低成本智能驾驶命名为「成行平台」,他通过以纯视觉传感器为主的配置方案实现以下高阶智能驾驶功能:
安全相关功能:
  • 主动安全:包含 FCW、AEB、LDW、LDP、BSD 和 DOW 等多项主动安全辅助功能。
    主动安全判断好与不好有一个比较直观的标准,就是中汽研的CNCAP测试,但目前为止没有看到关于大疆方案的CNCAP测试。

    传统汽车实现此类功能基本上靠前向摄像头和雷达实现,大疆的双目实现物体以及距离的识别。但大疆在上面没有提及RTCA/B交叉路口的碰撞以及LKS等对侧向长距感知能力强的安全辅助功能,可能是忘记还是侧向感知必须雷达来支持?

行车功能:
  • 行车辅助:包含基础横纵向自动控制,含拨杆变道、智能避障,人机共驾与路口辅助等功能。
  • 高速领航辅助:在高速/城快道路场景下,含收费站通行、智能调速、自动上下匝道等功能,支持导航地图/高精地图/路线记忆三类模式。
  • 记忆行车:系统记忆用户示范走过的路线,含自动通过路口、红绿灯识别、变道、上下匝道等功能。
  • 城区领航辅助升级版配置并拓展高算力SoC,可实现不依赖高精地图的城市开放道路领航驾驶辅助功能):在城区道路场景下,含施工道路应对、超车绕行、路口处理等功能,支持导航地图/高精地图/路线记忆三类模式。
以上功能都是当前高阶智能驾驶行车热门的功能,之前一直是高价车的特权,但大疆方案既支持无图也支持有图方案。
泊车功能
  • 泊车辅助:包含辅助泊车、智能召唤和遥控泊车三项泊车应用场景。
    这个主要基于视觉AI泊车,和高阶智能驾驶技术关系不大,目前基本上有鱼眼和超声波传感器的车辆基本能够实现。
  • 记忆泊车:系统记忆用户示教路线,支持室内和室外停车场,包含指定、区域和探索三种泊车模式。
  • 跨楼层记忆泊车:系统记忆用户示教路线,支持向上和向下的跨层场景,覆盖从收费杆到停车位的泊车全功能场景。
以上功能几乎涵盖了当前高阶智能驾驶泊车所有热门的功能,而不同的是以华为,小鹏为第一梯队的高阶智能驾驶车型价格都是靠近30万元甚至以上。
大疆方案优秀的地方是没有使用昂贵的传感器,以及高算力的高端AI芯片。而华为以及小鹏等都使用动辄几百TOPs,在跨层泊车,行车等方面都依赖昂贵的激光雷达。
那大疆采用什么方案降低了成本而实现相同的功能?
低成本方案的技术路线
国内智能驾驶的先锋们在2022年将智能驾驶堆料推向了最高点,那个时间中国汽车市场的智能驾驶比的是谁家用的激光雷达多,谁家用的AI芯片算力高,谁家传感器多等,智能驾驶系统的BOM成本高达到了大几万,甚至智驾系统都可以买一辆传统的小汽车了。
但是2022年底开启的汽车价格,让大家都在冷静的思考如何做到让智能驾驶的BOM成本回归到理性的区间,让感知和价格平衡,让智能驾驶的成本价格下降,成为汽车真正的卖点之一。
对于智能驾驶硬件降低成本方法无非是减少昂贵传感器,减少传感器等接收解码传输等芯片,减少算力芯片需求,优化算法等方法。
所以,首当其冲的就是干掉之前动辄大几千上万,目前依然要小几千元价格的激光雷达,当然激光雷达是个好东西,我们之前文章《通过广州车展-看自动驾驶激光雷达》中分享过他在3D环境探测方面是有很多优势,他目前唯一不好的东西就是贵,我可以期待接下来国内的第二波激光雷达将在在芯片以及微运动机械方面推动降本。
其次就是从发布更新速度就拉智能驾驶进城后腿,需要配套定位传感器,收费还按年收费的高精地图。
另外就是AI处理芯片,信号解码解串等芯片在智能驾驶域控中占据主要成本,当传感器减少了,意味着输入的数据减少了,那么AI处理芯片,以及信号处理等芯片的需求都减少,所以整个成本才能降下来。
比较大疆和国内高阶智能驾驶豪华硬件华为,小鹏的硬件可以发现。
大疆没有使用激光雷达,也省掉了用来识别侧向前后的4个周视摄像头,甚至连毫米波雷达都只是选装。
他主要的传感器是,800万像素前视惯导双目,以及4个300万像素环视鱼眼摄像头,1个后视镜300/800万摄像头。
双目摄像头可以获取驾驶环境的3D信息,这个之前文章《双目立体视觉的春天来了吗?》有介绍。3D环境的信息重要性我们之前很多文章介绍,这里就不赘述了,当然获取驾驶环境的3D信息大概还有有激光雷达ToF类传感器获取,也有特斯拉强大数据算法算力为代表的Occupancy算法《智能驾驶-城市领航辅助必备的BEV以及Occupancy networks》。
双目摄像头当前在以上三种方案中应该从BOM成本,开发难易程度来讲都是相对便宜的,当然相比激光雷达ToF方案从性能和场景来说肯定会有一定的缺陷
有了双目感知的3D信息,再加上时序信息就构成了所谓的4D场景,从而可以实现传统雷达可以实现的其他交通参与者的速度,方向等信息。
大疆方案的双目摄像头叫做惯导双目,是将IMU惯导集成一起,其实大疆早在其无人机上有应用,目前大疆车载双目已经发展到第二代,两个摄像头不是固定,双目自标定算法,还可以调节两个摄像头布置距离,所以应该在车辆整合方面更加容易随和。
惯导双目中的双目摄像头以及IMU充当双目VIO,"VIO"指的是视觉惯性里程计(Visual-Inertial Odometry),它是一种将视觉和惯性传感器数据结合起来实时估计设备或车辆位置和方向的技术,可以用于在室内、室外等环境中进行定位和导航。VIO 通过分析摄像头捕捉到的连续图像流,结合惯性测量单元 (IMU) 的数据,估计相机的运动轨迹,并计算出相机相对于起始位置的坐标和方向等姿态信息。
相比于小鹏等采用的单目记忆泊车,双目VIO技术由于有了深度信息,简化深度图像获取难度,从而降低建图难度,另外双目相机更加稳健。
所以大疆宣称的视觉惯导融合定位技术(VINS),可以在一些极端环境,如急行急停的拥堵、暴雨、夜间、地下停车场等场景,都可保持高精度的车辆轨迹计算。
4个环视鱼眼摄像头
传统的智能驾驶,用鱼眼摄像头做泊车类型的工作,额外添加4个长视距的周视摄像头用来行车的环境感知,但是大疆的方案是没有4个长视距的周视摄像头,但是他也宣称使用BEV算法实现领航辅助,他只有在城区辅助的方案时候,可以添加2个前向长视距的周视摄像头用来应对城区复杂的场景。
所以大疆如何做到BEV算法?
一般用作环视的鱼眼摄像头视角较大,可以达到180°以上,对近距离的感知较好,大家都采用低像素,最多也就是200万来实现。
但大疆4个300万像素的环视鱼眼摄像头,大疆对传统的鱼眼摄像头进行性能升级,采用4个超级鱼眼摄像头替代传统4个侧视+4个环视的高阶360度感知方案,支持大FOV视角以及80米的环视检测距离。
大疆通过4个300万像素的环视鱼眼摄像头的360度的视场角来实现BEV视觉算法方案,这个和当前小鹏和华为等装有周视摄像头的方案都不同。
有了BEV的算法和行泊一体的摄像头复用,大疆在一套BEV的算法上实现行车和泊车,大疆将其称为全场景OSP(Open Space Planning)决策规划技术,他的逻辑应该是搜寻驾驶可用空间,然后植入风险规划或者防御性驾驶等规则,进行运动路径规划控制。
非常简单的方法可以识别智能汽车行车和泊车算法是否相同,一般Rule based的泊车算法,基本都是有套路,你多次泊车,基本可以发现停车刻板的动作,但是按照行车算法做泊车基本会根据每次场景不同去规划路径和动作,例如华为的泊车。
1个后视镜300/800万摄像头
这个摄像头布置在传统汽车鲨鱼鳍的位置,这个位置主要用来观测后方,如果采取相对较广的角度,可以实现后向角雷达相关的功能。从而实现行车纵向控制或者后部安全预警等功能。
最后大疆提到的,4D纯视觉自标注技术来提高BEV场景的覆盖感知学习,一般智能驾驶开发需要大量的试验车来采集数据标注信息,其中试验车配备各种传感器,工控机,每台试验车都是价值不菲几百万,这对于开发来讲试验车都可能上亿的成本,所以大疆的双目惯导可以实现4D纯视觉自标注技术,可在不依赖激光采集车的前提下,完成纯视觉构型量产车的真值标注闭环,通过大规模量产车迅速积累覆盖长尾场景数据。
另外大疆提到双目摄像头可以提供道路预瞄信息给到其他底盘域从而实现底盘主动控制调节,提升舒适性。
所以大疆的前视惯导双目,以及4个环视鱼眼摄像头可以实现智能驾驶所需的目标物检测,测量动静态距离,给VSLAM提供VIO,BEV算法,以及4D数据和闭环。
通过减少视觉传感器的数量,采取独特3D视觉方法,导致大疆可以采用其熟悉的低价德州仪器TDA4芯片,大疆无人机主要采用TI的芯片,其实TDA类芯片存在汽车很久了,之前主要做环视图像处理,不过之前大家一直往高密度的环境数据采集,大算力处理方向去推安全和功能。
总结,类似低成本玩家以及趋势
至于大疆方案的技术,其实也并非完全独门绝技,双目惯导技术在低速机器人应用场景广泛而长久,国内鉴智,小觅智能,高仙,石头科技(没错就是那家搞出极石汽车的公司)等之前做运动速度较低的机器人公司都储备相关技术,学术界国内的香港大学,港科大都有大量相关学术以及应用积累。
随着大疆和五菱的结合拉开了低成本高阶智驾竞争的导火索,大众品牌的汽车也将上大疆的低成本方案,未来将有更多的低成本的高阶智能驾驶方案上车,这或许会将科技平权的高阶智驾推上高潮,届时智能驾驶将走出了功能有没有的阶段,开启了体验好不好的阶段。
*未经准许严禁转载和摘录-参考资料:
  1. 大疆车载官方发布文章

  2. 视觉及其融合惯性的 SLAM 技术发展综述

  3. Autonomous Driving and Its Sensor Technology 

  4. Delving into the Devils of Bird’s-eye-view Perception: A Review, Evaluation and Recipe


>>>>

相关推荐

  • 智能驾驶-城市领航辅助必备的BEV以及Occupancy networks

  • 通过广州车展-看自动驾驶激光雷达

  • Momenta的“无图”智能驾驶算法方案

  • 浅谈高阶智能驾驶-领航辅助的技术与发展

  • 从2023 IAA慕尼黑车展看欧美巨头的智能化 - Tier 1供应商篇

  • 智能汽车要用多少个摄像头?分别干啥?什么原理?
  • 特斯拉Model 3 的Project Highland以及HW  4.0

Vehicle 不断奔跑才能应对变化,与汽车业内企业个人一起成长
评论
  •  万万没想到!科幻电影中的人形机器人,正在一步步走进我们人类的日常生活中来了。1月17日,乐聚将第100台全尺寸人形机器人交付北汽越野车,再次吹响了人形机器人疯狂进厂打工的号角。无独有尔,银河通用机器人作为一家成立不到两年时间的创业公司,在短短一年多时间内推出革命性的第一代产品Galbot G1,这是一款轮式、双臂、身体可折叠的人形机器人,得到了美团战投、经纬创投、IDG资本等众多投资方的认可。作为一家成立仅仅只有两年多时间的企业,智元机器人也把机器人从梦想带进了现实。2024年8月1
    刘旷 2025-01-21 11:15 412浏览
  • 嘿,咱来聊聊RISC-V MCU技术哈。 这RISC-V MCU技术呢,简单来说就是基于一个叫RISC-V的指令集架构做出的微控制器技术。RISC-V这个啊,2010年的时候,是加州大学伯克利分校的研究团队弄出来的,目的就是想搞个新的、开放的指令集架构,能跟上现代计算的需要。到了2015年,专门成立了个RISC-V基金会,让这个架构更标准,也更好地推广开了。这几年啊,这个RISC-V的生态系统发展得可快了,好多公司和机构都加入了RISC-V International,还推出了不少RISC-V
    丙丁先生 2025-01-21 12:10 115浏览
  • 数字隔离芯片是一种实现电气隔离功能的集成电路,在工业自动化、汽车电子、光伏储能与电力通信等领域的电气系统中发挥着至关重要的作用。其不仅可令高、低压系统之间相互独立,提高低压系统的抗干扰能力,同时还可确保高、低压系统之间的安全交互,使系统稳定工作,并避免操作者遭受来自高压系统的电击伤害。典型数字隔离芯片的简化原理图值得一提的是,数字隔离芯片历经多年发展,其应用范围已十分广泛,凡涉及到在高、低压系统之间进行信号传输的场景中基本都需要应用到此种芯片。那么,电气工程师在进行电路设计时到底该如何评估选择一
    华普微HOPERF 2025-01-20 16:50 73浏览
  •     IPC-2581是基于ODB++标准、结合PCB行业特点而指定的PCB加工文件规范。    IPC-2581旨在替代CAM350格式,成为PCB加工行业的新的工业规范。    有一些免费软件,可以查看(不可修改)IPC-2581数据文件。这些软件典型用途是工艺校核。    1. Vu2581        出品:Downstream     
    电子知识打边炉 2025-01-22 11:12 55浏览
  • Ubuntu20.04默认情况下为root账号自动登录,本文介绍如何取消root账号自动登录,改为通过输入账号密码登录,使用触觉智能EVB3568鸿蒙开发板演示,搭载瑞芯微RK3568,四核A55处理器,主频2.0Ghz,1T算力NPU;支持OpenHarmony5.0及Linux、Android等操作系统,接口丰富,开发评估快人一步!添加新账号1、使用adduser命令来添加新用户,用户名以industio为例,系统会提示设置密码以及其他信息,您可以根据需要填写或跳过,命令如下:root@id
    Industio_触觉智能 2025-01-17 14:14 122浏览
  • 现在为止,我们已经完成了Purple Pi OH主板的串口调试和部分配件的连接,接下来,让我们趁热打铁,完成剩余配件的连接!注:配件连接前请断开主板所有供电,避免敏感电路损坏!1.1 耳机接口主板有一路OTMP 标准四节耳机座J6,具备进行音频输出及录音功能,接入耳机后声音将优先从耳机输出,如下图所示:1.21.2 相机接口MIPI CSI 接口如上图所示,支持OV5648 和OV8858 摄像头模组。接入摄像头模组后,使用系统相机软件打开相机拍照和录像,如下图所示:1.3 以太网接口主板有一路
    Industio_触觉智能 2025-01-20 11:04 153浏览
  • 本文介绍瑞芯微开发板/主板Android配置APK默认开启性能模式方法,开启性能模式后,APK的CPU使用优先级会有所提高。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。源码修改修改源码根目录下文件device/rockchip/rk3562/package_performance.xml并添加以下内容,注意"+"号为添加内容,"com.tencent.mm"为AP
    Industio_触觉智能 2025-01-17 14:09 164浏览
  • 高速先生成员--黄刚这不马上就要过年了嘛,高速先生就不打算给大家上难度了,整一篇简单但很实用的文章给大伙瞧瞧好了。相信这个标题一出来,尤其对于PCB设计工程师来说,心就立马凉了半截。他们辛辛苦苦进行PCB的过孔设计,高速先生居然说设计多大的过孔他们不关心!另外估计这时候就跳出很多“挑刺”的粉丝了哈,因为翻看很多以往的文章,高速先生都表达了过孔孔径对高速性能的影响是很大的哦!咋滴,今天居然说孔径不关心了?别,别急哈,听高速先生在这篇文章中娓娓道来。首先还是要对各位设计工程师的设计表示肯定,毕竟像我
    一博科技 2025-01-21 16:17 102浏览
  • 2024年是很平淡的一年,能保住饭碗就是万幸了,公司业绩不好,跳槽又不敢跳,还有一个原因就是老板对我们这些员工还是很好的,碍于人情也不能在公司困难时去雪上加霜。在工作其间遇到的大问题没有,小问题还是有不少,这里就举一两个来说一下。第一个就是,先看下下面的这个封装,你能猜出它的引脚间距是多少吗?这种排线座比较常规的是0.6mm间距(即排线是0.3mm间距)的,而这个规格也是我们用得最多的,所以我们按惯性思维来看的话,就会认为这个座子就是0.6mm间距的,这样往往就不会去细看规格书了,所以这次的运气
    wuliangu 2025-01-21 00:15 186浏览
  •  光伏及击穿,都可视之为 复合的逆过程,但是,复合、光伏与击穿,不单是进程的方向相反,偏置状态也不一样,复合的工况,是正偏,光伏是零偏,击穿与漂移则是反偏,光伏的能源是外来的,而击穿消耗的是结区自身和电源的能量,漂移的载流子是 客席载流子,须借外延层才能引入,客席载流子 不受反偏PN结的空乏区阻碍,能漂不能漂,只取决于反偏PN结是否处于外延层的「射程」范围,而穿通的成因,则是因耗尽层的过度扩张,致使跟 端子、外延层或其他空乏区 碰触,当耗尽层融通,耐压 (反向阻断能力) 即告彻底丧失,
    MrCU204 2025-01-17 11:30 182浏览
  • 临近春节,各方社交及应酬也变得多起来了,甚至一月份就排满了各式约见。有的是关系好的专业朋友的周末“恳谈会”,基本是关于2025年经济预判的话题,以及如何稳定工作等话题;但更多的预约是来自几个客户老板及副总裁们的见面,他们为今年的经济预判与企业发展焦虑而来。在聊天过程中,我发现今年的聊天有个很有意思的“点”,挺多人尤其关心我到底是怎么成长成现在的多领域风格的,还能掌握一些经济趋势的分析能力,到底学过哪些专业、在企业管过哪些具体事情?单单就这个一个月内,我就重复了数次“为什么”,再辅以我上次写的:《
    牛言喵语 2025-01-22 17:10 46浏览
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 221浏览
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 198浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦