引领 AI 汽车创新潮流,商汤绝影生成式 AI 汽车新品亮相上海车展

摘要

商汤绝影全面展示以 VLAR 技术架构为核心的生成式智驾 R-UniAD

2025 年 4 月 23 日,中国上海——第二十一届上海国际汽车工业展览会 (下称「2025 上海车展」) 今日隆重开幕,商汤绝影携系列生成式 AI 汽车创新产品亮相。

作为最专注于汽车行业的 AI 公司,商汤绝影全面展示了生成式智驾 R-UniAD 技术方案,并发布近实时在线交互的 4D 世界模型「绝影开悟 2.0」,打造智能驾驶的新路标。同时,绝影厚积薄发,全力推进辅助驾驶方案的量产交付。

面向智能座舱,商汤绝影行业首发专为车载 AIOS 打造的 AI 内核「绝影千机」,助力车企打造下一代 AIOS,「家庭新成员」New Member 全新升级,车展现场可以沉浸式体验 New Member 多模态识人、深度思考、免唤醒多人多轮对话等功能。此外,商汤绝影的健康管家、安全卫士和 3D 交互等 AI 座舱创新产品也相继亮相,全场景守护出行体验。

商汤绝影 CEO、商汤科技联合创始人、首席科学家王晓刚表示:「真正的 AI 汽车是将生成式 AI 深度融入智驾和座舱,既让辅助驾驶安全变得更有确定性,也要让每一辆车拥有『有趣的灵魂』,成为真正懂你、爱你、守护你的家庭新成员。绝影也希望能和更多合作伙伴携手前行,共创 AI 汽车的新进程。」

全面展示以 VLAR 为核心的生成式智驾 R-UniAD,商汤绝影打造智能驾驶的新路标

算法、算力和数据三者共同推动着人工智能技术的螺旋式上升和进步,随着强化学习等算法引入到大模型训练的思路得到验证,新的尺度定律正在开启,数据价值被进一步深入挖掘,模型能力天花板被打开。与此同时,智能驾驶范式也正在加速演进。

2025 年 2 月,商汤绝影发布行业首个与世界模型协同交互的端到端技术路线 R-UniAD,通过世界模型生成在线交互的仿真环境,以此进行端到端模型的强化学习训练,以打破数据瓶颈,提升系统性能上限。本届上海车展上,商汤绝影全面展示了 R-UniAD 技术方案,基于世界模型和强化学习两大核心技术,构建集「视觉-语言-行动-强化学习」于一体的 VLAR 技术架构,实现生成式智驾的核心突破。

基于世界模型和强化学习,绝影构建集「视觉-语言-行动-强化学习」于一体的 VLAR 技术架构

施工占道场景是辅助驾驶领域的棘手难题,也是交通事故频发的重要场景。商汤绝影现场演示了针对「施工占道刹停」场景,R-UniAD 如何依托「VLAR」增强模型能力。

首先,以「施工占道刹停」路测视频作为输入,R-UniAD 基于「绝影开悟」世界进行模型 4D 仿真复现,然后端到端模型生成该场景下各种可能驾驶策略,并与世界模型生成的环境交互,反复强化学习中找到最优路径,能预判施工占道,丝滑变道绕行。经过泛化训练后,遇到类似场景,端到端模型也能及时变道,并显著提升对此类施工场景的泛化交互能力。

生成式 R-UniAD 突破了现阶段端到端范式下数据、安全和性能的三大瓶颈,将实采场景数据的需求降低两个数量级;同时,基于强化学习算法,模型充分探索多元场景的安全边界;最终,R-UniAD 将能够实现远超人类的驾驶能力,打造智能驾驶的新路标。

「绝影开悟」世界模型 2.0,决胜智驾战场的重磅武器

世界模型是生成式智驾的基石所在。2024 年,在 2024 年 11 月「绝影实力 AI DAY」上,商汤绝影发布了行业标杆级别的「绝影开悟」世界模型,并已经应用于真值数据的生产。

去年「绝影开悟」世界模型主要聚焦 2D 视频生成技术的打磨,今年上海车展,「绝影开悟」升级为 2.0 版本,进化为近实时在线交互的 4D 世界模型,能够实现「4D 空间自由交互」,成为商汤绝影决胜智驾战场的重磅武器。

绝影开悟世界模 2.0

「绝影开悟 2.0」具备三大能力,首先是「面向量产的数据生成」,它具有多样性场景的可控生成的能力,能一键生成极端高风险场景,为模型训练提供了海量且丰富的训练数据。

其次它能够实现「复杂场景自由复现」,可以根据不同的需求,随心所欲地修改和调整场景中的各种要素,改变道路的布局、车辆的速度和类型,助力重构仿真测试场景。

最后,「绝影开悟 2.0」具备近实时交互能力,比行业 SOTA 提升 5 倍之多,让仿真训练过程更加高效和逼真,车辆的决策和反馈能够几乎在瞬间得到响应;同时感知结果接近真实精标数据 98%,能避免因数据风格差异带来的 Sim-to-Real 迁移时能力退化问题,为端到端模型打造「云端虚拟训练场」。

行业首发AI 内核绝影千机」,商汤绝影助力车企打造下一代 AIOS

生成式 AI 不仅带来了智驾新范式,同时也在深度融入智能座舱。商汤绝影重磅发布行业首个专为车载 AIOS 打造的 AI 内核「绝影千机」,助力车企打造下一代 AIOS。最核心的三大技术包括 MOE 多模态大模型、类人记忆框架以及原生智能体框架。同时,AI 基础系统模块、AIOS 工具链和生成式 UI 等外围技术,为三大核心模块提供支持与交互。

商汤绝影行业首发 AI 内核「绝影千机」

依托于「日日新 SenseNova V6」基模型,商汤绝影构建了覆盖 0.1B 至 70B 汽车垂类模型矩阵,模型首字延迟小于 300ms,吐字速度高达 47 Tokens/s,性能超越 DeepSeek,还能在快慢思考之间自如切换,契合每一种场景需求。

同时,具备类人情感的座舱系统,离不开记忆。商汤绝影构建了业内首个端侧类人记忆框架,赋予 AIOS 真正的认知力与成长性,每一次交互都让它更懂用户。

为了便于打造智能体生态,绝影构建了业内首个支持 MCP 协议的端侧原生智能体框架。它具备强大的自主规划能力,可进行多步的精准规划和执行。它支持 MCP 规范,能快速接入各类生态服务和工具能力,目前已集成 100+ 智能体与 1000+ API。这个框架还支持多智能体协调机制,能够实现并发、串行及混合模式下的高效协同,整体性能提升超过 30%。

New Member 全新升级,车展可沉浸式体验实车,展现「有趣灵魂」该有的模样

商汤绝影去年发布了「A New Member For U」(你的家庭新成员),让每一辆车拥有「有趣的灵魂」。今年上海车展,New Member 全新升级,还能在车展现场上车进行沉浸式体验。

首先 New Member 拥有了多模态识人能力,不需要用户专门进行注册,它在座舱多人交互的过程推测出每个人的名字,与相貌的结合,人物之间的关系。New member 不仅「认识你」,还能「理解你」,在和用户长期的互动过程当中,它不但能够记住兴趣爱好,还能记住生活的点滴,产生共情,从而更贴心地进行互动。

同时,它还具备深度思考的能力,表达会更加生动有趣。同时,当用户提出需求时,小影不是被动响应,而是会结合记忆与场景,主动分析疲惫情绪、家庭需求甚至天气变化进行综合性的深度思考,然后给出最合适的方案,成为懂你、会揣摩的「聪明搭子」。

最后,New Member 在业内首次实现免唤醒的多人多轮对话能力。之前行业做到的是大模型一对一的交流,如今 New Member 未被唤醒也能关注并理解座舱内成员间的对话,并能随时参与到对话当中,做到「不过度打扰,但时刻陪伴」,展现「有趣灵魂」该有的模样。

在现场的演示视频中,车内四人正在讨论去雨崩徒步需要的装备,New Member 会主动搭话,称赞那位提示大家注意低温要带羽绒服的朋友;在查漏补缺携带物品的同时,它记得车主喜欢摄影,主动提醒携带单反和三脚架,可以拍摄山顶星空。

针对「雨崩徒步」的多人对轮对话,New Member 结合记忆进行深度思考后的接话

另一个场景中,四个同事下班后临时决定一起聚餐,但四个人住的地方分散在上海各区,彼此距离较远,同时饮食偏好也有差异,New Member 能够听懂每个人的潜台词,综合回家的距离、口味诉求,就像一个「规划大师」,给出了大家都能接受的推荐餐厅。

New Member 还能提供有温度的情感互动和陪伴。一对情侣想去南京旅游,但因为是开车还是乘坐高铁出行产生了分歧和争论,后来女生质问「男生是不是不爱她了」,New Member 能理解语言背后的情绪,对女生进行安抚,并提供建议和帮助,给予情感支持。

AI 座舱创新产品矩阵,全场景守护出行体验

基于语言大模型、多模态大模型、文生图大模型和「大医」医疗大模型等组成的 AI 大模型体系,商汤绝影构建了健康管家、安全卫士、3D 交互等 AI 座舱创新产品矩阵。

商汤绝影已量产上车行业首个医疗 AI 大模型产品「旅医」。依托行业领先的医疗检测模型和「大医」大模型,绝影对用户进行对标医疗级的健康监测,打造用户专属健康档案,针对性推送健康科普内容,打造全出行周期的健康管家,同时,还将通过整合第三方线上医疗服务的能力,贯通车舱医疗生态圈,助力「旅医」成长为用户的全场景私人医生。

商汤绝影量产上车行业首个医疗 AI 大模型产品「旅医」

安全始终是智能汽车的基石。商汤绝影将展示行业领先的 DMS/OMS、多模态哨兵等多项安全产品,守护全场景的生命与财产安全。本届上海车展,绝影发布「驾驶失能」产品,通过传感器检测驾驶员面部、肢体姿态,结合车辆操控行为和呼气酒精含量,实时判断其状态并及时提醒,一旦驾驶员失去驾驶能力,自动安全停车并拨打求救电话,保障出行安全。

得益于绝影车舱量产数据积累与人眼 3D 重建算法突破,商汤绝影 3D 视线交互算法技术达到新高度。舱内 3D 视线结合车外前视相机,能够辨识人眼所关注的人、车、建筑、二维码、花草树木等目标,真正实现「视线所及,所见即所得」。

3D 视线与辅助驾驶深度融合,带来更安全的驾乘体验。结合对舱外的人、车及其他障碍物的检测,3D 视线可实时识别潜在风险。如当前方有行人突然奔跑欲横穿马路,而驾驶员视线未关注该方向,系统便会主动预警,提醒注意行人穿越风险。同时,AEB 等安全功能的触发灵敏度可根据 3D 视线智能调整,若驾驶员持续注视接近的障碍物,系统会降低预警频率,甚至无需提醒;反之,若驾驶员视线偏离,系统则保持正常灵敏度,及时响应。

打通舱内外的 3D 视线还能让用车体验更流畅。以离开停车场为例,现在用户要拿出手机扫码,流程长、体验差。通过 3D 视线结合车外摄像头,用户只需注视出口处二维码的同时说「我要缴费」,系统即可自动完成扫码支付,实现更便捷的无感通行。

加速推进量产交付,与合作伙伴携手共创 AI 新进程

商汤绝影的生成式 AI 技术和产品持续创新,商业化落地也全面开花,量产交付正在加速推进。

在「绝影 2025 上海车展发布会」上,东风汽车集团研发总院智能化技术首席总工程师张振林透露,他们和绝影团队正在携手推动 UniAD 一段式端到端方案的量产落地,「除了端到端的合作,未来东风汽车也将持续加大在智能化领域的研发投入,与绝影在开悟世界模型、DriveAGI 等方面展开深度合作。」

在辅助驾驶领域,商汤绝影的量产方案目前已合作 4 家车企,上车 7 款车型,2025 年更将厚积薄发,全力推进辅助驾驶方案的量产交付。今年 3 月底,绝影和广汽联合打造的行业首批基于地平线征程®6M 的辅助驾驶方案正式量产上市。今年还有更多基于地平线征程®6 打造的辅助驾驶方案量产落地奇瑞等众多车企伙伴,在英伟达 DIRVE AGX Thor 平台部署的绝影 UniAD 一段式端到端量产方案也将于 2025 年第四季度量产交付东风汽车。

商汤绝影辅助驾驶的量产成果,并将于 2025 年全力推进辅助驾驶方案的量产交付

不止如此,绝影基于地平线征程®6 打造的量产方案得到中汽研的认证,是首个获得中汽研《CATARC 标志认证实施规则–「征程之星」领航辅助驾驶认证》的辅助驾驶产品。

此外,本次上海车展期间,无论是基于地平线征程®6 打造的高速辅助驾驶、城区辅助驾驶,还是一段式端到端量产方案的城区泛化,商汤绝影都在展馆外开放了实车体验。

作为中国智能座舱 AI 软件的领头羊,商汤绝影的座舱 AI 软件市场份额已连续 5 年位列行业第一,并打造了超过 20 个行业首发的智能座舱产品与功能。2025 年初,商汤绝影联手知名车企伙伴,实现行业首个原生流式多模态座舱产品量产上车。行业首个医疗 AI 大模型产品「旅医」于 2025 年 3 月正式量产上车星途揽月,为用户打造全场景的健康管家。

截至 2024 年底,商汤绝影已与超 30 家国内外车企达成合作,覆盖 130 余款车型,量产交付累计突破 360 万辆。

随着生成式 AI 深度融入并重构智能汽车产业,作为加速智能汽车驶入 AGI 时代的战略合作伙伴,商汤绝影致力于打造「共生共创共享」合作新模式,在基础设施、大模型能力和数据闭环等领域开展深度合作的基础上,双方进一步挖掘生成式 AI 在智能驾驶和智能座舱领域的潜力,共创 AI 新进程。

注:本文所提及的「智驾」、「智能驾驶」等,指 L2 级辅助驾驶。

最新文章

极客公园

用极客视角,追踪你不可错过的科技圈.

极客之选

新鲜、有趣的硬件产品,第一时间为你呈现。

张鹏科技商业观察

聊科技,谈商业。