蔚来创新科技日:让技术更好地服务用户

原创 汽车电子设计 2024-07-28 10:32
芝能汽车出品

在昨天的蔚来汽车创新科技日上,我们看到了围绕技术创新的核心价值——让智能化与软件成为驱动品牌发展的关键力量在这次发布中,整车操作系统的作用被赋予了更重要的地位:蔚来推出了SkyOS·天枢整车全域操作系统,这一系统如同一个全能的工具箱,集成了车辆的各项功能。


本文将分别从SkyOS·天枢整车全域操作系统、Banyan 3智能系统和智能驾驶三个方面来分析。本次科技日还发布了第二代蔚来手机NIO Phone,手机不仅有技术价值,还承载着情感价值,比较适合单独进行深入探讨,本文暂不涉及。





Part 1
SkyOS·天枢整车全域操作系统


汽车要实现完全的智能化,在设计时就需要从顶层重新定义和思考,需要采用全新的架构和定义方式,实现从顶层到底层的打通,消除各域的界限,构建整车全域智能体系。为了实现这一目标,必须拥有一个能够在不同设备(汽车、手机、手表)上运行的整车全域操作系统,这样才能统一管理、控制、协调硬件资源,最大限度发挥硬件潜能。


SkyOS·天枢是中国首个整车全域操作系统,构建了“1+4+N”的技术集群,涵盖智能驾驶、车控、车联、数字座舱等整车全域。

● 1:多场景优化、高性能、高可靠的虚拟机监视器SkyOS-H,用于管理和调度整车的异构大算力资源,为各个系统提供安全隔离的运行环境。

● 4:四个操作系统内核。包括轻量、强可靠性、强实时性的SkyOS-L;基于微内核构建的高安全、强可靠性、强实时性的SkyOS-M;面向丰富应用场景高性能、实时性深度优化的SkyOS-R;面向原生智能深度定制的SkyOS-C。

● N:多个中间件,包括SOA框架、软件升级、数据闭环、信息安全&功能安全、网络、AI能力集等。

高性能、高可靠的虚拟机监视器 SkyOS-H 负责管理和调度整车的异构大算力资源;四个操作系统内核 SkyOS-L、SkyOS-M、SkyOS-R、SkyOS-C 分别针对不同需求进行优化;多个中间件则包括 SOA 框架、软件升级、数据闭环等,实现了底层硬件与上层应用的无缝连接。

简单来说,SkyOS-L是首个实现AutoSAR国产替代并规模化商用的实时操作系统,并能提供比AutoSAR更强大的功能,这个实现就很不容易了。

SkyOS-M是全球首个基于sel4微内核架构的商用量产双安全实时系统,也是世界上第一个被认为通过形式化验证确认没有bug的操作系统内核,安全性远高于ASIL-D。



Part 2
Banyan 3 的情感智能


今天给给人印象最深刻的是基于NOMI的全新架构——NOMI GPT。这一架构融合了先进的AI大模型能力和原生智能系统,定义了面向大模型的车载AI交互模式。NOMI GPT架构让NOMI进化为交互效率最高、信息传递效率最优的车载人工智能助手。


NOMI 可以成为情感引擎,是懂用户情感的伙伴。

NOMI Agents 多智能体框架使得 NOMI 能够自主理解、规划决策,并调用工具执行复杂任务。例如,它可以学会使用不同的工具,如调用搜索、导航和预约服务,根据任务的复杂性和时间跨度进行复杂的规划和编排,并建立与任务相关的短时和长时记忆。这种能力使得 NOMI 在处理各种场景时更加智能和高效。

NOMI GPT 基于自研情境智能算法和技术架构,可以感知包括人、车、环境、服务等上千种原子信息,并通过情境计算以及融合仲裁,输出语义化的情境描述,让 NOMI 的行动和表现恰如其分。专属智能则通过全栈自研的算法和架构,将用户与 NOMI 的互动进行筛选、推理、计算和沉淀,转化为千人千面的专属记忆。

同时,严格的数据规范和隐私保护措施,确保了用户个人信息的安全。情感表达模块能够根据情境智能和专属智能的输入,让 NOMI 组合出恰如其分的多模态表达,实现响应速度与表达效果之间的最佳平衡。


在个性化服务和生态方面,以车为中心打造的开放平台,为用户带来了丰富、优质、原生和无缝的极致体验。建立在 SkyCore 开放平台的基础上,采用基于 SOA 架构的原子化能力设计,将账号等应用基础服务、NOMI 交互等座舱能力协同、座椅、氛围灯等车控协同能力以及设备互联能力以原子能力方式开放给开发者。

目前,已经向三方应用伙伴开放了 260+车端跨域的原子能力 API。Flux-轻应用平台的推出,让车载应用商店缺少的原生应用可以基于 Web 生成 Flux-轻应用,获得接近原生体验的高品质内容和服务。微信小程序的接入,将用户日常手机上使用的小程序体验和服务全面接入车机,并且与车机融合获得更原生的体验。


Part 3
蔚来世界模型NWM


蔚来世界模型NWM,这是一个多元自回归生成式的具身驾驶模型,可全量理解数据、具有长时序推演和决策能力,能在100毫秒内推演出216种可能发生的场景,找到最优路径。


作为生成式模型,NWM可将3秒钟的驾驶视频作为Prompt(提示词),生成长达120秒的视频。NWM还具备与生俱来的闭环仿真测试能力。在一系列极具挑战性的道路环境中,NWM全面测试并验证了其卓越的性能表现,涵盖了施工区域、恶劣天气条件以及交通参与者之间的复杂交互场景。

NADArch2.0在算法层升级为引入世界模型的端到端架构,直接从原始传感器数据生成驾驶决策,减少传统方案中的信息损耗,且预测能力更强,让智能驾驶体验更拟人化。


在模型训练层面,NADArch2.0架构还可充分利用群体智能的数据闭环和生成式仿真数据,通过海量数据驱动智驾模型进行快速迭代。基于NADArch2.0架构,全域领航辅助NOP+和智能安全同步升级为2.0版本,为用户带来更轻松、更安全的智能驾驶体验。

NOP+2.0将于2024年下半年上车,智能安全2.0已逐步交付,增强版AEB于Banyan 2.6.5上车。

为什么需要世界模型?

● 解决数据覆盖问题和长尾场景:利用上亿的数据片段,覆盖常见及长尾场景。

● 自监督学习,实现高信息密度感知标注辅助训练:通过传感器数据重建,减少对人工标注的依赖,实现数据快速扩展。有监督模型只学习人工标注的信息,这会带来信息损失问题,因为人工标注的两大问题:标注精度不准,标注定义不全。自监督世界模型可以免去人工标注,模仿人类学习方式,来达到拟人效果。

● 增强信息抽取能力:生成式的模型,可以全量信息提取,增强模型的通用性和泛化能力。

 长时序推演和决策:采用自回归形式,模拟时间维度信息,提升智能驾驶的连续性和类人性处理能力。

蔚来提出了一个多元自回归生成式的智能驾驶模型,NIO WorldModel,拥有世界模型的特性。加入世界模型的端到端,解决了什么问题?在NADArch2.0架构中,蔚来将智能驾驶的算法层升级为引入世界模型的端到端架构,直接从原始传感器数据生成驾驶决策,减少传统方案中的信息损耗,且预测能力更强,让智能驾驶体验更拟人。


相比端到端的架构,引入NWM后,模型实现了三点优化:

● 全量理解信息,空间认知能力更强。

● 能够预测接下来的场景。

● 生成式无监督的方式,对海量数据的利用更加高效。

我们后续将持续跟踪这些技术细节,因为这一领域的发展变化非常迅速。


小结


蔚来在创新科技日上再次展示了其独特的技术特色和核心价值,并将技术作为其发展的核心驱动力,逐步构建起了自身的竞争优势壁垒。





汽车电子设计 本公众号是博主和汽车电子的行业的工程师们一起交流、探讨、思考的小结,以作为技术交流和沟通的桥梁
评论
  • 国际标准IPC 标准:IPC-A-600:规定了印刷电路板制造过程中的质量要求和验收标准,涵盖材料、外观、尺寸、焊接、表面处理等方面。IPC-2221/2222:IPC-2221 提供了用于设计印刷电路板的一般原则和要求,IPC-2222 则针对高可靠性电子产品的设计提供了进一步的指导。IPC-6012:详细定义了刚性基板和柔性基板的要求,包括材料、工艺、尺寸、层次结构、特征等。IPC-4101:定义了印刷电路板的基板材料的物理和电气特性。IPC-7351:提供了元件封装的设计规范,包括封装尺寸
    Jeffreyzhang123 2025-01-02 16:50 198浏览
  • 影像质量应用于多个不同领域,无论是在娱乐、医疗或工业应用中,高质量的影像都是决策的关键基础。清晰的影像不仅能提升观看体验,还能保证关键细节的准确传达,例如:在医学影像中,它对诊断结果有着直接的影响!不仅如此,影像质量还影响了:▶ 压缩技术▶ 存储需求▶ 传输效率随着技术进步,影像质量的标准不断提高,对于研究与开发领域,理解并提升影像质量已成为不可忽视的重要课题。在图像处理的过程中,硬件与软件除了各自扮演着不可或缺的基础角色,有效地协作能够确保图像处理过程既高效又具有优异的质量。软硬件各扮演了什么
    百佳泰测试实验室 2025-01-03 10:39 132浏览
  • 前言近年来,随着汽车工业的快速发展,尤其是新能源汽车与智能汽车领域的崛起,汽车安全标准和认证要求日益严格,应用范围愈加广泛。ISO 26262和ISO 21448作为两个重要的汽车安全标准,它们在“系统安全”中扮演的角色各自不同,但又有一定交集。在智能网联汽车的高级辅助驾驶系统(ADAS)应用中,理解这两个标准的区别及其相互关系,对于保障车辆的安全性至关重要。ISO 26262:汽车功能安全的基石如图2.1所示,ISO 26262对“功能安全”的定义解释为:不存在由于电子/电气系统失效引起的危害
    广电计量 2025-01-02 17:18 218浏览
  • 车身域是指负责管理和控制汽车车身相关功能的一个功能域,在汽车域控系统中起着至关重要的作用。它涵盖了车门、车窗、车灯、雨刮器等各种与车身相关的功能模块。与汽车电子电气架构升级相一致,车身域发展亦可以划分为三个阶段,功能集成愈加丰富:第一阶段为分布式架构:对应BCM车身控制模块,包含灯光、雨刮、门窗等传统车身控制功能。第二阶段为域集中架构:对应BDC/CEM域控制器,在BCM基础上集成网关、PEPS等。第三阶段为SOA理念下的中央集中架构:VIU/ZCU区域控制器,在BDC/CEM基础上集成VCU、
    北汇信息 2025-01-03 16:01 173浏览
  • 在测试XTS时会遇到修改产品属性、SElinux权限、等一些内容,修改源码再编译很费时。今天为大家介绍一个便捷的方法,让OpenHarmony通过挂载镜像来修改镜像内容!触觉智能Purple Pi OH鸿蒙开发板演示。搭载了瑞芯微RK3566四核处理器,树莓派卡片电脑设计,支持开源鸿蒙OpenHarmony3.2-5.0系统,适合鸿蒙开发入门学习。挂载镜像首先,将要修改内容的镜像传入虚拟机当中,并创建一个要挂载镜像的文件夹,如下图:之后通过挂载命令将system.img镜像挂载到sys
    Industio_触觉智能 2025-01-03 11:39 113浏览
  • 光耦合器,也称为光隔离器,是一种利用光在两个隔离电路之间传输电信号的组件。在医疗领域,确保患者安全和设备可靠性至关重要。在众多有助于医疗设备安全性和效率的组件中,光耦合器起着至关重要的作用。这些紧凑型设备经常被忽视,但对于隔离高压和防止敏感医疗设备中的电气危害却是必不可少的。本文深入探讨了光耦合器的功能、其在医疗应用中的重要性以及其实际使用示例。什么是光耦合器?它通常由以下部分组成:LED(发光二极管):将电信号转换为光。光电探测器(例如光电晶体管):检测光并将其转换回电信号。这种布置确保输入和
    腾恩科技-彭工 2025-01-03 16:27 155浏览
  • 本文继续介绍Linux系统查看硬件配置及常用调试命令,方便开发者快速了解开发板硬件信息及进行相关调试。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。查看系统版本信息查看操作系统版本信息root@ido:/# cat /etc/*releaseDISTRIB_ID=UbuntuDISTRIB_RELEASE=20.04DISTRIB_CODENAME=focalDIS
    Industio_触觉智能 2025-01-03 11:37 137浏览
  • 在快速发展的能源领域,发电厂是发电的支柱,效率和安全性至关重要。在这种背景下,国产数字隔离器已成为现代化和优化发电厂运营的重要组成部分。本文探讨了这些设备在提高性能方面的重要性,同时展示了中国在生产可靠且具有成本效益的数字隔离器方面的进步。什么是数字隔离器?数字隔离器充当屏障,在电气上将系统的不同部分隔离开来,同时允许无缝数据传输。在发电厂中,它们保护敏感的控制电路免受高压尖峰的影响,确保准确的信号处理,并在恶劣条件下保持系统完整性。中国国产数字隔离器经历了重大创新,在许多方面达到甚至超过了全球
    克里雅半导体科技 2025-01-03 16:10 117浏览
  • 【工程师故事】+半年的经历依然忧伤,带着焦虑和绝望  对于一个企业来说,赚钱才是第一位的,对于一个人来说,赚钱也是第一位的。因为企业要活下去,因为个人也要活下去。企业打不了倒闭。个人还是要吃饭的。企业倒闭了,打不了从头再来。个人失业了,面对的不仅是房贷车贷和教育,还有找工作的焦虑。企业说,一个公司倒闭了,说明不了什么,这是正常的一个现象。个人说,一个中年男人失业了,面对的压力太大了,焦虑会摧毁你的一切。企业说,是个公司倒闭了,也不是什么大的问题,只不过是这些公司经营有问题吧。
    curton 2025-01-02 23:08 289浏览
  • Matter加持:新世代串流装置如何改变智能家居体验?随着现在智能家庭快速成长,串流装置(Streaming Device,以下简称Streaming Device)除了提供更卓越的影音体验,越来越多厂商开始推出支持Matter标准的串流产品,使其能作为智能家庭中枢,连结多种智能家电。消费者可以透过Matter的功能执行多样化功能,例如:开关灯、控制窗帘、对讲机开门,以及操作所有支持Matter的智能家电。此外,再搭配语音遥控器与语音助理,打造出一个更加智能、便捷的居家生活。支持Matter协议
    百佳泰测试实验室 2025-01-03 10:29 136浏览
  • 自动化已成为现代制造业的基石,而驱动隔离器作为关键组件,在提升效率、精度和可靠性方面起到了不可或缺的作用。随着工业技术不断革新,驱动隔离器正助力自动化生产设备适应新兴趋势,并推动行业未来的发展。本文将探讨自动化的核心趋势及驱动隔离器在其中的重要角色。自动化领域的新兴趋势智能工厂的崛起智能工厂已成为自动化生产的新标杆。通过结合物联网(IoT)、人工智能(AI)和机器学习(ML),智能工厂实现了实时监控和动态决策。驱动隔离器在其中至关重要,它确保了传感器、执行器和控制单元之间的信号完整性,同时提供高
    腾恩科技-彭工 2025-01-03 16:28 159浏览
  • 物联网(IoT)的快速发展彻底改变了从智能家居到工业自动化等各个行业。由于物联网系统需要高效、可靠且紧凑的组件来处理众多传感器、执行器和通信设备,国产固态继电器(SSR)已成为满足中国这些需求的关键解决方案。本文探讨了国产SSR如何满足物联网应用的需求,重点介绍了它们的优势、技术能力以及在现实场景中的应用。了解物联网中的固态继电器固态继电器是一种电子开关设备,它使用半导体而不是机械触点来控制负载。与传统的机械继电器不同,固态继电器具有以下优势:快速切换:确保精确快速的响应,这对于实时物联网系统至
    克里雅半导体科技 2025-01-03 16:11 162浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦