毫末CEO顾维灏用「DARPA九问」回答城市NOH的实践经验

原创 焉知新能源汽车 2023-05-12 22:21

1975 年,时任 DARPA(美国国防部高级研究计划局)局长的乔治·海尔迈耶提出了著名的「海尔迈耶问答法」,这一思考方法由九个基础问题组成,此后帮助 DARPA 成功在隐形飞机、太空激光、太空红外技术和人工智能等项目上取得重要成就。

这一方法被称为「DARPA 九问」,DARPA 的项目都是围绕这一方法来评估和管控技术风险。

DARPA 九问,代表了 DARPA 那些「雄心勃勃」提案的标准,既要有足够的创新性,有改变世界的目标,又要切合实际,有真正实现的可能。

在 4 月上海车展期间的闭门活动中,毫末智行 CEO 顾维灏采用「DARPA九问」的方法,系统地阐述了毫末所走的自动驾驶 AI 之路。

顾维灏在演讲中强调,毫末很早就确定数据驱动的路径,也是国内最早引入 Transformer 大模型、最早确立重感知路线的自动驾驶公司,同时毫末还发布了 DriveGPT 自动驾驶生成式大模型。

01

数据驱动

在演讲中,顾维灏首先提出了第一个问题,毫末想做什么产品?产品目标是什么?

顾维灏的回答是,毫末真正要做的是完全无人的自动驾驶,但是判断这件事情短期内实现不了。毫末选择的路线就是,先潜心研究 L2+ 的辅助驾驶。

随着用户的大规模使用和技术的迭代研发,依靠数据驱动的方式实现自动驾驶能力的快速上升

毫末的高速 NOH 和城市 NOH 都是达到 L4 自动驾驶目标的过程。这个过程会非常有意义。

顾维灏提到现在正在发生的一些现象:

「现在等红绿灯的时候路上按喇叭的越来越多,因为很多人都会看手机,看短视频。

过去是开车时不能看手机,逐渐变成开车时偶尔可以看手机,最后变为看手机时偶尔开车。这是一个逐渐放权的过程,也是一个技术逐渐进步的过程。」

顾维灏强调:「安全是所有自动驾驶和辅助驾驶最主要的目标,我们要帮助用户,比如说在车里开视频会议无法立马结束,在这个间隙如何能够保障车辆的安全行驶」。

对于城市 NOH 产品,为了能够在复杂的城市道路场景当中保证安全底线,毫末在红绿灯控车、路口通行以及移动行驶这三个很重要的场景来设置产品目标。

首先,在红绿灯识别控车方面,毫末识别准确率必须要达到 99.99% 以上

这并不是一项简单的任务,因为在我国不同城市的红绿灯都有各自的形状和特点,有三排灯,有五排灯,有横着的,有竖着的,还有创新的,而且黑天和白天的红绿灯识别难度也不相同。

其次,在路口通行方面也非常具有挑战,路口场景有直行,有左转、右转,还有Y字形、三岔口、六岔口等。毫末直行通过率要做到 99%,复杂路口也要达 70-80%,在产品设计的时候就按此来定义目标。

最后,是移动行驶。

毫末的城市 NOH 要解决在什么样的车流状况下运行最好,这里就涉及产品定义,包括使用的通过率是多少,以及如何保障用户的安全。

02

Transformer+重感知路线+Drive GPT

这里就要回答第二个问题:已有的相关产品是什么?产品局限是什么?

毫末的回答是:采用重感知技术来做城市 NOH,要解决基于高精地图路线的区域限制和成本限制的问题

顾维灏对于毫末在自动驾驶 AI 上的创新研究,进行了一番回顾。

毫末早在三年前,也就是在 2020 年下半年开始启动 NOH 项目,启动之前「蔚小理」都已经开始研发,当时行业基本都采用英伟达 Orin 芯片 + 高精地图技术路线。

但高精地图由于成本因素、政策限制、鲜度保持等方面存在诸多难点和问题。

在这种情况下,毫末要么选择追随行业模式,要么另辟蹊径寻求新路径,毫末给出的答案是:重感知技术路线

技术产品研发与市场落地应用有着一定的时间差,事实证明这一技术路线目前已成为行业共识。

顾维灏解释「中国高速公路一共有 30 万公里,城市道路 1000 万公里,市面上最牛的地图公司采集车也不过才 200 台,1000 万公里用 200 台采集车采集,而且要采集很多要素,在中国的基建条件下可行性不高,依赖高精地图方案的话会在城市行驶边境拓展、地图的一致性、驾驶的安全和稳定性上都会产生影响和问题」。

对于第三个问题:毫末采用的方法有哪些创新之处?顾维灏做了如下回答:毫末进行了三场技术创新的攻坚战。

第一个创新是:毫末将感知方法从 CNN 模型转型到 Transformer 大模型。

随着自动驾驶感知能力的不断提升,摄像头的数量在不断增加,传统的卷积神经网络 CNN 模型在处理大规模图片信息的时候会遇到效率低下的弊端。

在 2020 年底的时候 Transformer 大模型已经在自然语言处理上开始应用了,毫末在 2021 年初就把 Transformer 识别图像的方法开始跟行业讲述了,现如今许多企业也开始使用 Transformer 技术。

第二个创新就是:毫末不再用高精地图。

在 2021 年的时候,毫末开始研究不使用高精地图的辅助驾驶方案,在最早期高精地图是有用的,十几年前摄像头像素只有一百万,计算力只有 2.5T,但现在算力都 300 多 T,外界环境发生了变化,就会促进技术方案随之变化。

基于更多的前视、后视的测试方法、Transformer 大模型以及 BEV 感知模式,这些技术的加持可以让毫末 NOH 看得更远、看得更广,无论是左转、右转都可以精准识别。

第三点创新就是:自动驾驶生成式大模型 DriveGPT。

顾维灏提到:

「得益于去年毫末就与火山引擎合作搞了一个自动驾驶智算中心,规模可以说是自动驾驶领域的第一。

毫末很早就意识到云端计算大模型一定是发展趋势,云端计算如果用公有云就太贵了,如果建立私有云操作中心一定会更划算。

有了自己的智算中心加持,DriveGPT 以大数据为基础,加上 GPT 这种新技术范式,再加上使用过程中有了用户的反馈和对能力的判定,加起来使得自动驾驶能够可行。」

另外,顾维灏还提到,毫末有自己的算力、模型和大规模量产应用场景,就像 Open AI 可以基于微软提供的算力、数据和应用环境一样同时具备这三要素。

但是中国同时拥有这三个要素,并想做这件事情的公司少之又少,所以毫末才可能把做的所有方法都发布出来。

毫末的成功会带来哪些改变?

当 GPT 出现之前,会分很多子研究方向和子研究任务,比如说机器翻译就是非常封闭的方向,像文章摘要、文章的理解或者分词等,每一项自然语言都是一个一个独立的小任务,直到 ChatGPT 出现,这些小任务都不存在了,只用一种方法就把自然语言所有问题都解决了,而且还可以不断推理,抽取常识,类比到自动驾驶也是一样。

顾维灏直言行业内已经搞了 20 年,基于规则也好,基于小模型也好,包括预测、规划、决策、控制,每一项都分成一个个小任务,20 年也没搞成。

因此,毫末将 DriveGPT 这样的方式引进来,先搞定认知的问题,把感知的四个大模型任务合为一个,那自动驾驶从此就两项任务,一个是感知任务,一个是认知任务。

所以 DriveGPT 或是说 GPT 这种新的科技范式会让自动驾驶产生质的变化并且和以往完全不同。

值得一提的是,毫末推出的自动标注,在行业上,给出正确的标注结果,一张图片需要 5 元;如果使用 DriveGPT 雪湖·海若的场景识别服务,一张图片的价格将下降到 0.5 元。单帧图片整体标注成本仅相当于行业的 1/10。

接下来,毫末会将图像帧及 4D Clips 场景识别服务逐步向行业开放使用,这将大幅降低行业使用数据的成本,提高数据质量,从而加速自动驾驶技术的快速发展。

演讲最后,顾维灏也介绍了时间、成本以及如何验证成功等问题。

做自动驾驶周期一定是漫长的,面对终极目标——完全无人的自动驾驶 Robotaxi,维灏也给出了他们的计划「当毫末城市 NOH 被数万个或者数十万个用户用起来的时候,并且平均 MPI 达到一定水平,我们就可以启动这个赛道产品了。」

添加微信,找到我们




更多阅读



我们研究了特斯拉、毫末「自动驾驶算法」的秘密

Momenta CEO曹旭东:自动驾驶没有百亿美金公司,要么千亿美金、要么被收购或淘汰

2022,车载高规激光雷达量产元年

焉知新能源汽车 新能源科技、智车科技
评论
  • PNT、GNSS、GPS均是卫星定位和导航相关领域中的常见缩写词,他们经常会被用到,且在很多情况下会被等同使用或替换使用。我们会把定位导航功能测试叫做PNT性能测试,也会叫做GNSS性能测试。我们会把定位导航终端叫做GNSS模块,也会叫做GPS模块。但是实际上他们之间是有一些重要的区别。伴随着技术发展与越发深入,我们有必要对这三个词汇做以清晰的区分。一、什么是GPS?GPS是Global Positioning System(全球定位系统)的缩写,它是美国建立的全球卫星定位导航系统,是GNSS概
    德思特测试测量 2025-01-13 15:42 447浏览
  • 01. 什么是过程能力分析?过程能力研究利用生产过程中初始一批产品的数据,预测制造过程是否能够稳定地生产符合规格的产品。可以把它想象成一种预测。通过历史数据的分析,推断未来是否可以依赖该工艺持续生产高质量产品。客户可能会要求将过程能力研究作为生产件批准程序 (PPAP) 的一部分。这是为了确保制造过程能够持续稳定地生产合格的产品。02. 基本概念在定义制造过程时,目标是确保生产的零件符合上下规格限 (USL 和 LSL)。过程能力衡量制造过程能多大程度上稳定地生产符合规格的产品。核心概念很简单:
    优思学院 2025-01-12 15:43 471浏览
  • ARMv8-A是ARM公司为满足新需求而重新设计的一个架构,是近20年来ARM架构变动最大的一次。以下是对ARMv8-A的详细介绍: 1. 背景介绍    ARM公司最初并未涉足PC市场,其产品主要针对功耗敏感的移动设备。     随着技术的发展和市场需求的变化,ARM开始扩展到企业设备、服务器等领域,这要求其架构能够支持更大的内存和更复杂的计算任务。 2. 架构特点    ARMv8-A引入了Execution State(执行状
    丙丁先生 2025-01-12 10:30 433浏览
  • 随着全球向绿色能源转型的加速,对高效、可靠和环保元件的需求从未如此强烈。在这种背景下,国产固态继电器(SSR)在实现太阳能逆变器、风力涡轮机和储能系统等关键技术方面发挥着关键作用。本文探讨了绿色能源系统背景下中国固态继电器行业的前景,并强调了2025年的前景。 1.对绿色能源解决方案日益增长的需求绿色能源系统依靠先进的电源管理技术来最大限度地提高效率并最大限度地减少损失。固态继电器以其耐用性、快速开关速度和抗机械磨损而闻名,正日益成为传统机电继电器的首选。可再生能源(尤其是太阳能和风能
    克里雅半导体科技 2025-01-10 16:18 319浏览
  • 随着数字化的不断推进,LED显示屏行业对4K、8K等超高清画质的需求日益提升。与此同时,Mini及Micro LED技术的日益成熟,推动了间距小于1.2 Pitch的Mini、Micro LED显示屏的快速发展。这类显示屏不仅画质卓越,而且尺寸适中,通常在110至1000英寸之间,非常适合应用于电影院、监控中心、大型会议、以及电影拍摄等多种室内场景。鉴于室内LED显示屏与用户距离较近,因此对于噪音控制、体积小型化、冗余备份能力及电气安全性的要求尤为严格。为满足这一市场需求,开关电源技术推出了专为
    晶台光耦 2025-01-13 10:42 455浏览
  • 流量传感器是实现对燃气、废气、生活用水、污水、冷却液、石油等各种流体流量精准计量的关键手段。但随着工业自动化、数字化、智能化与低碳化进程的不断加速,采用传统机械式检测方式的流量传感器已不能满足当代流体计量行业对于测量精度、测量范围、使用寿命与维护成本等方面的精细需求。流量传感器的应用场景(部分)超声波流量传感器,是一种利用超声波技术测量流体流量的新型传感器,其主要通过发射超声波信号并接收反射回来的信号,根据超声波在流体中传播的时间、幅度或相位变化等参数,间接计算流体的流量,具有非侵入式测量、高精
    华普微HOPERF 2025-01-13 14:18 443浏览
  • 说到福特,就要从亨利·福特(Henry Ford)这个人物说起。在发明大王爱迪生的电气工厂担任工程师的福特下班后,总是在自家仓库里努力研究和开发汽车。1896年,福特终于成功制造出一辆三轮车,开启了福特汽车的传奇。最初几年,福特都是独自制造汽车并同时进行销售。 (今天很多人都知道的精益管理中的5S方法,或多或少地受到了福特 CANDO方法的影响。)1903年,福特从牧师、律师、银行家、会计师等十一位股东那里筹集了十万美元,并在自家庭院成立了美国第五百零三家汽车公司——福特汽车公司(Fo
    优思学院 2025-01-10 11:21 49浏览
  • 根据Global Info Research(环洋市场咨询)项目团队最新调研,预计2030年全球无人机电池和电源产值达到2834百万美元,2024-2030年期间年复合增长率CAGR为10.1%。 无人机电池是为无人机提供动力并使其飞行的关键。无人机使用的电池类型因无人机的大小和型号而异。一些常见的无人机电池类型包括锂聚合物(LiPo)电池、锂离子电池和镍氢(NiMH)电池。锂聚合物电池是最常用的无人机电池类型,因为其能量密度高、设计轻巧。这些电池以输出功率大、飞行时间长而著称。不过,它们需要
    GIRtina 2025-01-13 10:49 161浏览
  • Snyk 是一家为开发人员提供安全平台的公司,致力于协助他们构建安全的应用程序,并为安全团队提供应对数字世界挑战的工具。以下为 Snyk 如何通过 CircleCI 实现其“交付”使命的案例分析。一、Snyk 的挑战随着客户对安全工具需求的不断增长,Snyk 的开发团队面临多重挑战:加速交付的需求:Snyk 的核心目标是为开发者提供更快、更可靠的安全解决方案,但他们的现有 CI/CD 工具(TravisCI)运行缓慢,无法满足快速开发和部署的要求。扩展能力不足:随着团队规模和代码库的不断扩大,S
    艾体宝IT 2025-01-10 15:52 160浏览
  • 电动汽车(EV)正在改变交通运输,为传统内燃机提供更清洁、更高效的替代方案。这种转变的核心是电力电子和能源管理方面的创新,而光耦合器在其中发挥着关键作用。这些不起眼的组件可实现可靠的通信、增强安全性并优化电动汽车系统的性能,使其成为正在进行的革命中不可或缺的一部分。光耦合器,也称为光隔离器,是一种使用光传输电信号的设备。通过隔离高压和低压电路,光耦合器可确保安全性、减少干扰并保持信号完整性。这些特性对于电动汽车至关重要,因为精确控制和安全性至关重要。 光耦合器在电动汽车中的作用1.电池
    腾恩科技-彭工 2025-01-10 16:14 69浏览
  • 在不断发展的电子元件领域,继电器——作为切换电路的关键设备,正在经历前所未有的技术变革。固态继电器(SSR)和机械继电器之间的争论由来已久。然而,从未来发展的角度来看,固态继电器正逐渐占据上风。本文将从耐用性、速度和能效三个方面,全面剖析固态继电器为何更具优势,并探讨其在行业中的应用与发展趋势。1. 耐用性:经久耐用的设计机械继电器:机械继电器依靠物理触点完成电路切换。然而,随着时间的推移,这些触点因电弧、氧化和材料老化而逐渐磨损,导致其使用寿命有限。因此,它们更适合低频或对切换耐久性要求不高的
    腾恩科技-彭工 2025-01-10 16:15 93浏览
  •   在信号处理过程中,由于信号的时域截断会导致频谱扩展泄露现象。那么导致频谱泄露发生的根本原因是什么?又该采取什么样的改善方法。本文以ADC性能指标的测试场景为例,探讨了对ADC的输出结果进行非周期截断所带来的影响及问题总结。 两个点   为了更好的分析或处理信号,实际应用时需要从频域而非时域的角度观察原信号。但物理意义上只能直接获取信号的时域信息,为了得到信号的频域信息需要利用傅里叶变换这个工具计算出原信号的频谱函数。但对于计算机来说实现这种计算需要面对两个问题: 1.
    TIAN301 2025-01-14 14:15 76浏览
  • 随着通信技术的迅速发展,现代通信设备需要更高效、可靠且紧凑的解决方案来应对日益复杂的系统。中国自主研发和制造的国产接口芯片,正逐渐成为通信设备(从5G基站到工业通信模块)中的重要基石。这些芯片凭借卓越性能、成本效益及灵活性,满足了现代通信基础设施的多样化需求。 1. 接口芯片在通信设备中的关键作用接口芯片作为数据交互的桥梁,是通信设备中不可或缺的核心组件。它们在设备内的各种子系统之间实现无缝数据传输,支持高速数据交换、协议转换和信号调节等功能。无论是5G基站中的数据处理,还是物联网网关
    克里雅半导体科技 2025-01-10 16:20 424浏览
  • 新年伊始,又到了对去年做总结,对今年做展望的时刻 不知道你在2024年初立的Flag都实现了吗? 2025年对自己又有什么新的期待呢? 2024年注定是不平凡的一年, 一年里我测评了50余块开发板, 写出了很多科普文章, 从一个小小的工作室成长为科工公司。 展望2025年, 中国香河英茂科工, 会继续深耕于,具身机器人、飞行器、物联网等方面的研发, 我觉得,要向未来学习未来, 未来是什么? 是掌握在孩子们生活中的发现,和精历, 把最好的技术带给孩子,
    丙丁先生 2025-01-11 11:35 428浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦