从智驾到智舱,商汤绝影用生成式AI给汽车升级“大脑”

原创 赛博汽车 2025-04-24 21:52
作者 | 章涟漪
编辑 | 邱锴俊

如何用AI打造“有趣的灵魂”?商汤绝影从智舱到智驾,全方位给出了自己的答案。

4月23日,2025上海车展上,商汤绝影对外展示了系列生成式AI汽车产品。其中,智驾领域包括生成式智驾R-UniAD技术方案、近实时在线交互的4D世界模型“绝影开悟2.0”;智舱领域包括专为车载AIOS打造的AI内核“绝影千机”,以及全新升级的“家庭新成员”等。

在商汤绝影CEO王晓刚看来,智能汽车的范式演进经历了三个阶段。

第一个阶段为完成点对点特定任务的工具;第二个阶段伴随着大模型的加持,逐渐变成了人类的助手,可以完成各种通用的任务;第三个阶段开始可以提供主动的服务和情感的陪伴,成为家庭的新成员。

他希望,可以让每一台车都拥有有趣的灵魂。

从2021年商汤绝影首次以独立品牌亮相,到如今系列生成式AI产品的发布。近4年时间,商汤绝影完成了在汽车领域全产品谱系的布局。下一步,在持续落地智能座舱的同时,它也将全力推进辅助驾驶方案的量产交付。

作为一家以相对“轻量化”的人工智能起家的企业,商汤即将要在强“制造”的汽车智能化领域再次证明自己。

01

智驾进入生成式阶段,加速量产落地

与智能汽车的发展历程一样,王晓刚认为,智驾演进也经历了三个阶段:规则式智驾、端到端智驾和生成式智驾。

现在这个阶段是端到端数据驱动的方式。”在采访环节,王晓刚称,这种方式有自己的问题。

一是它对于数据量和质量的依赖。由于它是直接根据输入的图像视频去推测车辆行驶轨迹,是模仿人类驾驶的行为,但人类在面对比较困境场景时,90%的驾驶行为是不太好的,因此只有10%、甚至1%高水平的数据,需要大量数据学习,对数据深度依赖。

二是端到端自动驾驶具有不确定性。一些问题场景没办法复现,它的解决方式是通过采集大量类似的其他场景重新训练模型。模型更新后,之前所关心的特定场景能否被解决,是不一定,甚至存在已解决场景回退的现象。

如今,伴随着对自动驾驶安全性、确定性要求更高,更加依赖于云端的模拟仿真,包括大模型。

因此,王晓刚表示,下一个阶段智能驾驶进入到生成式阶段,其中很重要的技术是世界模型。它能够非常准确的重建,并且模拟泛化现实物理世界,在重构世界里去确定性的解决需要解决的问题。同时,还能基于该场景进行泛化,生成出很多类似问题的场景。

“这些场景,无论是采集成本,还是危险性都非常高。”王晓刚称,强化学习加上世界模型,能够突破人类驾驶行为的上限。

正是出于这样的思考,去年11月,商汤绝影发布了“开悟”世界模型。

今年以来,受到deepseek的启发,商汤绝影把世界模型从1.0升级到2.0,同时也跟强化学习进行了结合,发布了生成式智驾R-UniAD技术方案。在王晓刚看来,“未来一定是在云端的研发比重越来越重。”

本届上海车展上,商汤绝影全面展示了R-UniAD技术方案,基于世界模型和强化学习两大核心技术,构建集“视觉-语言-行动-强化学习”于一体的VLAR技术架构。

王晓刚以“施工占道场景”为例,讲述了VLAR技术架构是如何处理这一问题的。

首先,以“施工占道刹停”路测视频作为输入,R-UniAD基于“绝影开悟”世界进行模型4D仿真复现,然后端到端模型生成该场景下各种可能驾驶策略,并与世界模型生成的环境交互,反复强化学习中找到最优路径,能预判施工占道,变道绕行。经过泛化训练后,遇到类似场景,端到端模型也能及时变道,并显著提升对此类施工场景的泛化交互能力。

王晓刚指出,生成式R-UniAD突破了现阶段端到端范式下数据、安全和性能的三大瓶颈,将实采场景数据的需求降低两个数量级;同时,基于强化学习算法,模型充分探索多元场景的安全边界;最终,R-UniAD将能够实现远超人类的驾驶能力。

至于世界模型,则是生成式智驾的基石所在。如果说R-UniAD是“AI驾驶员”,那么这个世界模型就是它的“驾校”。

相比1.0版本主要聚焦2D视频生成技术的打磨,2.0版本则进化为近实时在线交互的4D世界模型,能够实现“4D空间自由交互”。

“绝影开悟2.0”具备三大能力,首先是“面向量产的数据生成”,它具有多样性场景的可控生成的能力,能一键生成极端高风险场景;其次能实现“复杂场景自由复现”,可以根据不同的需求,修改和调整场景中的各种要素;最后具备近实时交互能力,比行业SOTA提升5倍之多,让仿真训练过程更加高效和逼真,同时感知结果接近真实精标数据98%。

有了世界模型和云端训练之后,对于车端的算力要求依然有需求。

在王晓刚看来,类似deepseek的一些技术路线的出现,可以通过MOE架构,减少一系列工程化,在同等规模的参数规模情况下降低对算力的依赖。“但永远都是当算力越大的时候,它能够应对场景复杂程度能力越强,这个趋势是确定的,所以算力的要求和模型的能力还是有一个正比的关系。”

技术不断升级的同时,商汤绝影也在加速推进智驾落地。王晓刚表示,厚积薄发,绝影要全力推进辅助驾驶方案的量产交付。

在辅助驾驶领域,商汤绝影主要有三套方案,基于地平线J6E打造的AD Pro行泊一体方案;基于地平线J6M打造的AD Max城区领航;基于英伟达Orin/地平线J6P打造的端到端智驾方案

截至目前,其量产方案已合作中国一汽、广汽集团、奇瑞汽车和东风汽车4家车企,上车7款车型。

发布会上,王晓刚宣布,在英伟达DIRVE AGX Thor平台部署的绝影UniAD一段式端到端量产方案将于2025年第四季度量产交付东风汽车。

除了端到端,东风汽车还将与绝影在开悟世界模型、DriveAGI等方面展开深度合作。

未来,商汤绝影在智驾领域量产将会不断提速,并加速新技术的落地。“我们在与车企合作过程中,也在帮助提升他们的L3解决方案。”王晓刚如是说。

02

智舱“有趣升级”,发布全新AI内核

与智驾后来者身份,寻求“厚积薄发”不同,智能座舱一直是商汤的强项,其座舱AI软件市场份额已连续5年位列行业第一。

截至2024年底,商汤绝影已与超30家国内外车企达成合作,覆盖130余款车型,量产交付累计突破360万辆,其中多数为座舱领域。

商汤绝影在智能座舱领域主打的是“有趣灵魂”。

去年“绝影日”期间,商汤绝影发布了“A New Member For U”(你的家庭新成员),其三大特点是察言观色,无时不在,心有灵犀,背后的技术支撑是原生流式多模态的大模型。

今年上海车展上,商汤绝影又对其进行了升级,背后融入了“DeepSeek”的思路。

实际上,自DeepSeek“火了”后,很多车企将其接入座舱之中。对此,王晓刚表示,如果只是非常简单的把DeepSeek连接到座舱里面,其实是不适合的,因为其设计并不是为了座舱的交互环境,需要在车舱进行优化。

当然,他也认为,DeepSeek加入后的想象空间。他表示,同样的算力,通过MOE的架构,可以去部署更大的模型,这些模型可以节省带宽、节省算力,带来更好的体验,这也是商汤绝影研发的方向。

我们是把DeepSeek中核心技术用到了SenseAuto-chat模型里,进行了升级。同时,结合多模态的模型,实现了深度推理。”王晓刚指出,新的“New Member”则是基于此打造,带来了三大核心功能。

首先是拥有了多模态识人能力,不需要用户专门进行注册,它在座舱多人交互的过程推测出每个人的名字,与相貌的结合,人物之间的关系,并在与用户长期互动过程当中,记住生活的点滴,产生共情,从而更贴心地进行互动。

其实是具备深度思考的能力。当用户提出需求时,它会结合记忆与场景,主动分析疲惫情绪、家庭需求甚至天气变化进行综合性的深度思考,然后给出最合适的方案。

最后,是免唤醒的多人多轮对话能力。之前行业做到的是大模型一对一的交流,如今New Member未被唤醒也能关注并理解座舱内成员间的对话,并能随时参与到对话当中,做到“不过度打扰,但时刻陪伴”。

有趣灵魂背后,需要强大技术底座支撑。为此,商汤绝影打造了类人情感的AI内核,即专为车载AIOS打造的AI内核“绝影千机”。

王晓刚表示,该产品最核心的三大技术包括MOE多模态大模型、类人记忆框架以及原生智能体框架。同时,AI 基础系统模块、AIOS 工具链和生成式UI等外围技术,为三大核心模块提供支持与交互。

“现有的这些操作系统,包括车企的,覆盖范围比较广。”王晓刚称,商汤绝影的“千机”更关注AI相关的大模型,这些也是商汤的强项。未来,绝影将把这些AI内核和主机厂操作系统结合在一起,形成AI的操作系统,推动智能座舱向更加高级的智能体进化。

王晓刚还强调,依托于“日日新SenseNova V6”基模型,商汤绝影构建了覆盖0.1B至70B汽车垂类模型矩阵,模型首字延迟小于300ms,吐字速度高达47 Tokens/s,性能超越DeepSeek,还能在快慢思考之间自如切换,以满足各种场景需求。

同时,具备类人情感的座舱系统,离不开记忆。商汤绝影构建了业内首个端侧类人记忆框架,赋予AIOS真正的认知力与成长性,每一次交互都让它更懂用户。

为了便于打造智能体生态,商汤绝影还构建了业内首个支持MCP协议的端侧原生智能体框架。它具备自主规划能力,可进行多步的精准规划和执行。它支持MCP规范,能快速接入各类生态服务和工具能力,目前已集成100+智能体与1000+ API。这个框架还支持多智能体协调机制,能够实现并发、串行及混合模式下的高效协同,整体性能提升超过30%。

此外,基于语言大模型、多模态大模型、文生图大模型和“大医”医疗大模型等组成的 AI 大模型体系,商汤绝影构建了健康管家、安全卫士、3D交互等AI座舱创新产品矩阵。不断升级智能座舱相关产品。

智驾落地加速、智舱不断创新。在AI与汽车深度融合的新时代,商汤绝影在智能汽车领域的探索还在不断深入。

-END-
图片
更多阅读——

赛博汽车 聚焦智能汽车、自动驾驶,与产业共同成长.
评论 (0)
  • 探针台作为高精度测试设备,在光电行业的关键器件研发、性能测试及量产质量控制中发挥核心作用,主要涵盖以下应用场景与技术特性:一、光电元件性能测试1.‌光电器件基础参数测量‌l 用于LED、光电探测器、激光器等元件的电流-电压(I-V)特性、光功率、响应速度等参数测试,支撑光通信、显示技术的器件选型与性能优化。l 支持高频信号测试(如40GHz以上射频参数),满足高速光调制器、光子集成电路(PIC)的带宽与信号完整性验证需求。2.‌光响应特性分析‌l 通过电光转换效率测
    锦正茂科技 2025-04-27 13:19 115浏览
  •     今天,纯电动汽车大跃进牵引着对汽车电气低压的需求,新需求是48V。车要更轻,料要堆满。车身电子系统(电子座舱)从分布改成集中(域控),电气上就是要把“比12V系统更多的能量,送到比12V系统数量更少的ECU去”,所以,电源必须提高电压,缩小线径。另一方面,用比传统12V,24V更高的电压,有利于让电感类元件(螺线管,电机)用更细的铜线,缩小体积去替代传统机械,扩大整车电气化的边界。在电缆、认证行业60V标准之下,48V是一个合理的电压。有关汽车电气低压,另见协议标准第
    电子知识打边炉 2025-04-27 16:24 201浏览
  •   北京华盛恒辉电磁环境适应性测试系统是针对复杂电磁环境进行仿真、测试与评估的关键设备,以下从系统功能、技术架构、应用场景、核心优势、发展趋势五个维度展开全面解析:   应用案例   目前,已有多个电磁环境适应性测试系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润电磁环境适应性测试系统。这些成功案例为电磁环境适应性测试系统的推广和应用提供了有力支持。   一、系统功能   复杂电磁环境构建   全生命周期测试能力   实时监测与反馈   二、技术架构   模块化设
    华盛恒辉l58ll334744 2025-04-26 17:21 197浏览
  • 晶振在使用过程中可能会受到污染,导致性能下降。可是污染物是怎么进入晶振内部的?如何检测晶振内部污染物?我可不可以使用超声波清洗?今天KOAN凯擎小妹将逐一解答。1. 污染物来源a. 制造过程:生产环境不洁净或封装密封不严,可能导致灰尘和杂质进入晶振。b. 使用环境:高湿度、温度变化、化学物质和机械应力可能导致污染物渗入。c. 储存不当:不良的储存环境和不合适的包装材料可能引发化学物质迁移。建议储存湿度维持相对湿度在30%至75%的范围内,有助于避免湿度对晶振的不利影响。避免雨淋或阳光直射。d.
    koan-xtal 2025-04-28 06:11 96浏览
  • 探针台作为半导体制造与测试的核心设备,通过精密定位与多环境适配能力,支撑芯片研发、生产及验证全流程。以下是其关键应用领域与技术特性:一、核心功能支撑1.‌电性能测试与分析‌l 在晶圆切割前,探针台直接接触芯片电极,测量阈值电压、漏电流、跨导等200余项参数,用于评估良品率及优化工艺设计。l 支持单晶体管I-V曲线测量,定位栅极氧化层厚度偏差(精度达0.2nm),为器件性能分析提供数据基础。2.‌纳米级定位与测量‌l 定位精度达±0.1μm,满足5nm及以下制程芯片的
    锦正茂科技 2025-04-27 13:09 151浏览
  • 一、智能家居的痛点与创新机遇随着城市化进程加速,现代家庭正面临两大核心挑战:情感陪伴缺失:超60%的双职工家庭存在“亲子陪伴真空期”,儿童独自居家场景增加;操作复杂度攀升:智能设备功能迭代导致用户学习成本陡增,超40%用户因操作困难放弃高阶功能。而WTR096-16S录音语音芯片方案,通过“语音交互+智能录音”双核驱动,不仅解决设备易用性问题,更构建起家庭成员间的全天候情感纽带。二、WTR096-16S方案的核心技术突破1. 高保真语音交互系统动态情绪语音库:支持8种语气模板(温柔提醒/紧急告警
    广州唯创电子 2025-04-28 09:24 121浏览
  •  集成电路封装测试是确保芯片性能与可靠性的核心环节,主要包括‌晶圆级测试(CP测试)‌和‌封装后测试(FT测试)‌两大阶段,流程如下:一、晶圆级测试(CP测试)1.‌测试目的‌:在晶圆切割前筛选出功能缺陷或性能不达标的晶粒(Die),避免后续封装环节的资源浪费,显著降低制造成本。2.‌核心设备与操作‌l ‌探针台(Prober)‌:通过高精度移动平台将探针与晶粒的Pad jing准接触,实现电气连接。l ‌ATE测试机‌:提供测试电源、信号输入及功能向量,接收晶粒反
    锦正茂科技 2025-04-27 13:37 182浏览
  • 4月22日下午,备受瞩目的飞凌嵌入式「2025嵌入式及边缘AI技术论坛」在深圳深铁皇冠假日酒店盛大举行,此次活动邀请到了200余位嵌入式技术领域的技术专家、企业代表和工程师用户,共享嵌入式及边缘AI技术的盛宴!1、精彩纷呈的展区产品及方案展区是本场活动的第一场重头戏,从硬件产品到软件系统,从企业级应用到高校教学应用,都吸引了现场来宾的驻足观看和交流讨论。全产品矩阵展区展示了飞凌嵌入式丰富的产品线,从嵌入式板卡到工控机,从进口芯片平台到全国产平台,无不体现出飞凌嵌入式在嵌入式主控设备研发设计方面的
    飞凌嵌入式 2025-04-28 14:43 82浏览
  • 在电子电路设计和调试中,晶振为电路提供稳定的时钟信号。我们可能会遇到晶振有电压,但不起振,从而导致整个电路无法正常工作的情况。今天凯擎小妹聊一下可能的原因和解决方案。1. 误区解析在硬件调试中,许多工程师在测量晶振时发现两端都有电压,例如1.6V,但没有明显的压差,第一反应可能是怀疑短路。晶振电路本质上是一个交流振荡电路。当晶振未起振时,两端会静止在一个中间电位,通常接近电源电压的一半。万用表测得的是稳定的直流电压,因此没有压差。这种情况一般是:晶振没起振,并不是短路。2. 如何判断真
    koan-xtal 2025-04-28 05:09 115浏览
  • 速卖通,作为阿里巴巴集团旗下的跨境电商平台,于2010年横空出世,彼时正值全球电商市场蓬勃发展,互联网的普及让跨境购物的需求日益增长,速卖通顺势而为,迅速吸引了全球目光。它以“让天下没有难做的生意”为使命,致力于打破国界限制,搭建起中国商家与全球消费者之间的桥梁。在其发展的黄金时期,速卖通取得的成绩令人瞩目。在欧洲市场,速卖通一度成为第一大电商平台。根据第三方机构《欧洲跨境商务》的评选,速卖通凭借出色的服务和消费者口碑,在“欧洲十大跨境电商平台”中脱颖而出,力压来自美国的亚马逊和eBay等电商巨
    用户1742991715177 2025-04-26 20:23 185浏览
  • 贞光科技代理品牌紫光国芯的车规级LPDDR4内存正成为智能驾驶舱的核心选择。在汽车电子国产化浪潮中,其产品以宽温域稳定工作能力、优异电磁兼容性和超长使用寿命赢得市场认可。紫光国芯不仅确保供应链安全可控,还提供专业本地技术支持。面向未来,紫光国芯正研发LPDDR5车规级产品,将以更高带宽、更低功耗支持汽车智能化发展。随着智能网联汽车的迅猛发展,智能驾驶舱作为人机交互的核心载体,对处理器和存储器的性能与可靠性提出了更高要求。在汽车电子国产化浪潮中,贞光科技代理品牌紫光国芯的车规级LPDDR4内存凭借
    贞光科技 2025-04-28 16:52 70浏览
  • 在CAN总线分析软件领域,当CANoe不再是唯一选择时,虹科PCAN-Explorer 6软件成为了一个有竞争力的解决方案。在现代工业控制和汽车领域,CAN总线分析软件的重要性不言而喻。随着技术的进步和市场需求的多样化,单一的解决方案已无法满足所有用户的需求。正是在这样的背景下,虹科PCAN-Explorer 6软件以其独特的模块化设计和灵活的功能扩展,为CAN总线分析领域带来了新的选择和可能性。本文将深入探讨虹科PCAN-Explorer 6软件如何以其创新的模块化插件策略,提供定制化的功能选
    虹科汽车智能互联 2025-04-28 16:00 69浏览
  •  探针台的维护直接影响其测试精度与使用寿命,需结合日常清洁、环境控制、定期校准等多维度操作,具体方法如下:一、日常清洁与保养1.‌表面清洁‌l 使用无尘布或软布擦拭探针台表面,避免残留清洁剂或硬物划伤精密部件。l 探针头清洁需用非腐蚀性溶剂(如异丙醇)擦拭,检查是否弯曲或损坏。2.‌光部件维护‌l 镜头、观察窗等光学部件用镜头纸蘸取wu水jiu精从中心向外轻擦,操作时远离火源并保持通风。3.‌内部防尘‌l 使用后及时吹扫灰尘,防止污染物进入机械滑
    锦正茂科技 2025-04-28 11:45 58浏览
  •   无人机部件仿真与模型验证平台系统解析   北京华盛恒辉无人机部件仿真与模型验证平台系统是无人机研发的核心工具,通过多元功能、创新架构和广泛应用,推动无人机技术发展。以下从核心功能、技术架构、应用场景、优势及发展趋势展开解析。   应用案例   目前,已有多个无人机部件仿真与模型验证平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润无人机部件仿真与模型验证平台。这些成功案例为无人机部件仿真与模型验证平台的推广和应用提供了有力支持。   一、核心功能   三维建模与可视化
    华盛恒辉l58ll334744 2025-04-26 16:39 254浏览
  • 2025年全球人形机器人产业迎来爆发式增长,政策与资本双重推力下,谷歌旗下波士顿动力、比亚迪等跨国企业与本土龙头争相入局,产业基金与风险投资持续加码。仅2025年上半年,中国机器人领域就完成42笔战略融资,累计金额突破45亿元,沪深两市机器人指数年内涨幅达68%,印证了资本市场对智能终端革命的强烈预期。值得关注的是,国家发展改革委联合工信部发布《人形机器人创新发展行动计划》,明确将仿生感知系统、AI决策中枢等十大核心技术纳入"十四五"国家重大专项,并设立500亿元产业引导基金。技术突破方面,本土
    电子资讯报 2025-04-27 17:08 230浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦