腾讯全球数字生态大会回顾:NVIDIA智驾方案驱动软件定义汽车的持续创新

英伟达NVIDIA中国 2022-12-09 18:13

汽车智能化大趋势下,“软件定义汽车”成为行业共识,软件将深入汽车开发、验证、销售和服务全过程,并不断改进和优化该过程,以实现体验持续优化、过程持续优化、价值持续创造。“软件定义汽车”正在重塑汽车产业生态,构建汽车行业发展新格局。


在上周举行的 2022 年腾讯全球数字生态大会中,NVIDIA 中国区工程和解决方案高级总监赖俊杰博士在 “智慧出行专场”分享了 NVIDIA DRIVE 端到端自动驾驶平台,探讨了软件定义汽车的持续创新。以下为内容概要。



“软件定义汽车”蓄势待发


当前,软件定义汽车成为行业共识。每辆汽车都将具有一个强大的计算平台,结合复杂的软件栈,可以支持汽车出厂时配置的各种功能,并且能够为将来的各种扩展和升级预留空间。同时,集中式处理将成为主流。车内的各种计算任务,包括自动驾驶以及智慧座舱、人机交互等 AI 功能,都将由一个统一的计算平台来完成。


借此,数据中心内不断迭代的算法模型,就可通过 OTA(无线更新)方式,对汽车的各项功能进行便捷且持续性的更新。在汽车的整个生命周期内,汽车的易用性和安全性将会得到不断提升,这便是软件和算法的价值。


车载 SoC 迭代推新,

助力自动驾驶汽车“全速前进”


以上的愿景和预期,势必对车载计算平台提出极高要求。首先,车载计算平台需要能够完成当前各种的复杂计算任务,还要为将来的功能升级留出足够的余量,并且需要保证在车载环境下,能满足不同类型的计算任务对实时性和安全性的苛刻需求。



上图展示的是 NVIDIA 车载芯片的几代产品,从最初的 Parker,Xavier,到如今已经实现量产的 DRIVE Orin,和刚刚发布的面向未来的 DRIVE Thor,可以很明显看出各代产品在能力上的不断提升。借助 DRIVE Thor 的强大性能,智能座舱、仪表显示、车载人机交互娱乐系统、泊车以及自动驾驶功能,就可以由单一的架构实现。从车企角度,集中式的车载计算平台,可以显著简化设计开发,并降低供应链紧张的潜在风险,在成本、功耗及设备重量上都有很大优势。


从硬件到软件、工作流,

基于统一计算架构下的端到端开发流程


通过梳理自动驾驶算法的开发过程,可知整个流程其实是相当复杂的。不管是从前期的数据采集、打标、清理,还是到后期的算法验证及测试,以及中间各种功能模型的训练和开发,不同的阶段,涉及到不同的复杂工具和框架。


对于自动驾驶的算法设计者而言,端到端的、无缝流畅的开发环境,能大大提高研发效率。NVIDIA 在自动驾驶开发全流程都提供了相应的工具软件的支持


举几个简单的例子:


  • 在模型验证阶段的数据回放(Replay)阶段,需要将自动驾驶模型算法在真实数据上做测试,并且需要跟真值数据进行比对。为了提高整个系统的吞吐,NVIDIA 提供了 TensorRT、Triton 来加速模型推理的性能,并提供了 DeepStream SDK 来处理视频流的解码和编码,以及跟模型计算的衔接。


  • 在智慧座舱场景下,NVIDIA 提供了语音识别及合成技术,例如自然语言处理、手势、视频会议等多种功能的预训练模型。


  • 自动驾驶技术要求车辆实现实时精准的定位,并获取反映当前道路状况的高清地图信息。NVIDIA 通过收购、整合 DeepMap 的技术,赋能车辆在道路上拥有更强的自我定位能力。



接下来一起看看另一个维度。一支包含 50 台数据采集车辆的车队,大约每天会产生 1.6PB 的数据。这些数据经过清洗、打标后,将进入模型训练步骤,然后基于真实数据和仿真数据来进行模型效果验证。整个流程会涉及到大量的数据处理、数据传输以及复杂的计算过程。并且,这个过程需要日复一日反复进行,以期能够不断提升模型的效果,从而提高自动驾驶的安全性和可靠性。


未来的数据中心和自动驾驶


前面提到的这些现实需求,对数据中心的架构提出了较高挑战。为了能够实现计算性能的高扩展性,数据中心的设计非常复杂。另外,从设计到真正完成部署,中间涉及到的采购和安装调试,也会花费大量的时间及人力;数据中心上线之后,日常的运维管理同样需要付出很多精力。


为了应对前面提到的端到端开发环境、海量数据处理、数据中心部署运维等多方面的需求,在系统层面,NVIDIA 结合自己以及与客户合作的经验,针对数据中心的底层架构提出了基于 NVIDIA DGX 的参考架构实现;在平台运行管理层面,提供了 BaseCommand;在框架和工具层面,提供了 NVDIA AI Enterprise 一整套方案,其中包含优化的训练框架、部署软件和预训练模型等等。另外,还提供了用于模拟仿真的 DRIVE ReplicatorDRIVE Sim 平台。


借助这些从系统、运维到框架工具等一整套的软硬件方案,自动驾驶技术的开发者们可以方便高效地完成算法开发、模型训练验证及部署的全流程


腾讯云和 NVIDIA 围绕云上 GPU 相关产品,在 TI 平台和 TACO 平台展开了深入合作。这些平台提供了企业级的模型训练优化,以及模型推理部署的支持。另外双方也正在自动驾驶仿真方向进行合作及探索。NVIDIA 希望能和腾讯智能汽车云一起,打造强大的软硬件生态,为自动驾驶的客户在云端提供丰富的一站式的选择。


点击“阅读原文”,了解更多关于 NVIDIA 自动驾驶汽车解决方案的内容。



即刻扫描下方海报二维码收下这份 GTC22 精选演讲合集清单,在NVIDIA on-Demand 上点播观看主题演讲精选、中国精选、元宇宙应用领域与全球各行业及领域的最新成果!


评论
  • 一个易用且轻量化的UI可以大大提高用户的使用效率和满意度——通过快速启动、直观操作和及时反馈,帮助用户快速上手并高效完成任务;轻量化设计则可以减少资源占用,提升启动和运行速度,增强产品竞争力。LVGL(Light and Versatile Graphics Library)是一个免费开源的图形库,专为嵌入式系统设计。它以轻量级、高效和易于使用而著称,支持多种屏幕分辨率和硬件配置,并提供了丰富的GUI组件,能够帮助开发者轻松构建出美观且功能强大的用户界面。近期,飞凌嵌入式为基于NXP i.MX9
    飞凌嵌入式 2025-01-16 13:15 221浏览
  • 80,000人到访的国际大展上,艾迈斯欧司朗有哪些亮点?感未来,光无限。近日,在慕尼黑electronica 2024现场,ams OSRAM通过多款创新DEMO展示,以及数场前瞻洞察分享,全面展示自身融合传感器、发射器及集成电路技术,精准捕捉并呈现环境信息的卓越能力。同时,ams OSRAM通过展会期间与客户、用户等行业人士,以及媒体朋友的深度交流,向业界传达其以光电技术为笔、以创新为墨,书写智能未来的深度思考。electronica 2024electronica 2024构建了一个高度国际
    艾迈斯欧司朗 2025-01-16 20:45 187浏览
  • 百佳泰特为您整理2025年1月各大Logo的最新规格信息,本月有更新信息的logo有HDMI、Wi-Fi、Bluetooth、DisplayHDR、ClearMR、Intel EVO。HDMI®▶ 2025年1月6日,HDMI Forum, Inc. 宣布即将发布HDMI规范2.2版本。新规范将支持更高的分辨率和刷新率,并提供更多高质量选项。更快的96Gbps 带宽可满足数据密集型沉浸式和虚拟应用对传输的要求,如 AR/VR/MR、空间现实和光场显示,以及各种商业应用,如大型数字标牌、医疗成像和
    百佳泰测试实验室 2025-01-16 15:41 189浏览
  • Ubuntu20.04默认情况下为root账号自动登录,本文介绍如何取消root账号自动登录,改为通过输入账号密码登录,使用触觉智能EVB3568鸿蒙开发板演示,搭载瑞芯微RK3568,四核A55处理器,主频2.0Ghz,1T算力NPU;支持OpenHarmony5.0及Linux、Android等操作系统,接口丰富,开发评估快人一步!添加新账号1、使用adduser命令来添加新用户,用户名以industio为例,系统会提示设置密码以及其他信息,您可以根据需要填写或跳过,命令如下:root@id
    Industio_触觉智能 2025-01-17 14:14 85浏览
  • 电竞鼠标应用环境与客户需求电竞行业近年来发展迅速,「鼠标延迟」已成为决定游戏体验与比赛结果的关键因素。从技术角度来看,传统鼠标的延迟大约为20毫秒,入门级电竞鼠标通常为5毫秒,而高阶电竞鼠标的延迟可降低至仅2毫秒。这些差异看似微小,但在竞技激烈的游戏中,尤其在对反应和速度要求极高的场景中,每一毫秒的优化都可能带来致胜的优势。电竞比赛的普及促使玩家更加渴望降低鼠标延迟以提升竞技表现。他们希望通过精确的测试,了解不同操作系统与设定对延迟的具体影响,并寻求最佳配置方案来获得竞技优势。这样的需求推动市场
    百佳泰测试实验室 2025-01-16 15:45 313浏览
  • 2024年是很平淡的一年,能保住饭碗就是万幸了,公司业绩不好,跳槽又不敢跳,还有一个原因就是老板对我们这些员工还是很好的,碍于人情也不能在公司困难时去雪上加霜。在工作其间遇到的大问题没有,小问题还是有不少,这里就举一两个来说一下。第一个就是,先看下下面的这个封装,你能猜出它的引脚间距是多少吗?这种排线座比较常规的是0.6mm间距(即排线是0.3mm间距)的,而这个规格也是我们用得最多的,所以我们按惯性思维来看的话,就会认为这个座子就是0.6mm间距的,这样往往就不会去细看规格书了,所以这次的运气
    wuliangu 2025-01-21 00:15 61浏览
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 205浏览
  •  光伏及击穿,都可视之为 复合的逆过程,但是,复合、光伏与击穿,不单是进程的方向相反,偏置状态也不一样,复合的工况,是正偏,光伏是零偏,击穿与漂移则是反偏,光伏的能源是外来的,而击穿消耗的是结区自身和电源的能量,漂移的载流子是 客席载流子,须借外延层才能引入,客席载流子 不受反偏PN结的空乏区阻碍,能漂不能漂,只取决于反偏PN结是否处于外延层的「射程」范围,而穿通的成因,则是因耗尽层的过度扩张,致使跟 端子、外延层或其他空乏区 碰触,当耗尽层融通,耐压 (反向阻断能力) 即告彻底丧失,
    MrCU204 2025-01-17 11:30 154浏览
  • 随着智慧科技的快速发展,智能显示器的生态圈应用变得越来越丰富多元,智能显示器不仅仅是传统的显示设备,透过结合人工智能(AI)和语音助理,它还可以成为家庭、办公室和商业环境中的核心互动接口。提供多元且个性化的服务,如智能家居控制、影音串流拨放、实时信息显示等,极大提升了使用体验。此外,智能家居系统的整合能力也不容小觑,透过智能装置之间的无缝连接,形成了强大的多元应用生态圈。企业也利用智能显示器进行会议展示和多方远程合作,大大提高效率和互动性。Smart Display Ecosystem示意图,作
    百佳泰测试实验室 2025-01-16 15:37 194浏览
  • 现在为止,我们已经完成了Purple Pi OH主板的串口调试和部分配件的连接,接下来,让我们趁热打铁,完成剩余配件的连接!注:配件连接前请断开主板所有供电,避免敏感电路损坏!1.1 耳机接口主板有一路OTMP 标准四节耳机座J6,具备进行音频输出及录音功能,接入耳机后声音将优先从耳机输出,如下图所示:1.21.2 相机接口MIPI CSI 接口如上图所示,支持OV5648 和OV8858 摄像头模组。接入摄像头模组后,使用系统相机软件打开相机拍照和录像,如下图所示:1.3 以太网接口主板有一路
    Industio_触觉智能 2025-01-20 11:04 117浏览
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 146浏览
  • 实用性高值得收藏!! (时源芯微)时源专注于EMC整改与服务,配备完整器件 TVS全称Transient Voltage Suppre,亦称TVS管、瞬态抑制二极管等,有单向和双向之分。单向TVS 一般应用于直流供电电路,双向TVS 应用于电压交变的电路。在直流电路的应用中,TVS被并联接入电路中。在电路处于正常运行状态时,TVS会保持截止状态,从而不对电路的正常工作产生任何影响。然而,一旦电路中出现异常的过电压,并且这个电压达到TVS的击穿阈值时,TVS的状态就会
    时源芯微 2025-01-16 14:23 186浏览
  • 本文介绍瑞芯微开发板/主板Android配置APK默认开启性能模式方法,开启性能模式后,APK的CPU使用优先级会有所提高。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。源码修改修改源码根目录下文件device/rockchip/rk3562/package_performance.xml并添加以下内容,注意"+"号为添加内容,"com.tencent.mm"为AP
    Industio_触觉智能 2025-01-17 14:09 120浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦