公众号
当前位置:栏目>最新>文章详情

端到端模型+强化学习+世界模型,商汤绝影智驾方案上海车展将部署实车

来源:汽车商业评论(钱亚光)25年2月22日 17:13

2025年春节前后,比亚迪、长安等车企的“智驾平权”和DeepSeek在AI上提升算力利用效率的创新,都在加速国内自动驾驶发展进程。

在全球大模型竞赛中,以往方法是围绕“数据、算法、算力”三要素中的算力进行突破,通过不断堆高算力水平来实现大模型训练和推理的加速。而DeepSeek通过架构和算法创新,显著降低内存占用和计算开销,在有限算力与训练成本下显著提升算力利用效率。

在2月22日的商汤大模型生产力论坛上,商汤绝影CEO,商汤科技联合创始人、首席科学家王晓刚重磅发布了行业首个与世界模型协同交互的端到端自动驾驶路线R-UniAD,通过构建世界模型生成在线交互的仿真环境,以此进行端到端模型的强化学习训练。

与春节开始持续受到市场关注的DeepSeek技术创新思路同归一源:从模仿学习向强化学习升级演进,从而实现端到端自动驾驶超越人类的驾驶表现。


商汤绝影CEO,商汤科技联合创始人、首席科学家王晓刚

算法算力数据三者共同推动着人工智能技术的螺旋式上升和进步,随着强化学习等算法引入到大模型训练的思路得到验证,新的尺度定律正在开启,数据价值被进一步深入挖掘,模型能力天花板被打开。王晓刚表示,强化学习的技术创新也同样可以迁移到端到端自动驾驶领域。

基于UniAD端到端自动驾驶方案和开悟世界模型,商汤绝影R-UniAD将通过强化学习加速智驾跨越式演进。

2022年底,商汤绝影提出了行业首个感知决策一体化自动驾驶通用模型UniAD,目前越来越多的车企和科技公司开始跟进端到端的技术路线。如今,数据驱动的端到端自动驾驶解决方案已成为行业共识

端到端的自动驾驶本质是通过海量的高质量人类驾驶数据,来实现最佳的模仿驾驶效果。然而,基于模仿学习的技术范式可以做到接近人类但难以突破人类能力上限。同时,受限于高质量场景数据稀缺性和驾驶数据质量的参差不齐,端到端智驾方案要达到人类驾驶能力的天花板并不容易,动辄千万Clips的高质量数据回流形成了规模门槛。

特斯拉通过七百万辆高阶智驾量产车和超10万Peta FLOPS算力,已经跨越了这个门槛,同时也构筑了与国内车企具有数量级差距的基础设施壁垒

今年春节期间,DeepSeek-R1基于纯强化学习的关键创新引发了广泛的关注。通过少量高质量数据的冷启动,模型进行多阶段的强化学习训练,有效降低大模型训练的数据规模门槛,同时也让尺度定律得以延续,为模型变得更大更强铺平了道路。更重要的是,强化学习能够让大模型自行涌现出长思维链能力,显著提升推理效果,甚至可能具备超越人类的思维能力

王晓刚表示,基于强化学习的大模型技术路线可以迁移到端到端自动驾驶算法的训练与研发之中。

从数据规模来看,多阶段强化学习的训练方法能大幅降低端到端自动驾驶数据规模门槛。R-UniAD就是通过高质量数据进行冷启动,用模仿学习的方式训练出一个端到端基础模型,再通过强化学习方法进行训练。据测算,小样本多阶段学习的技术路线能让端到端自动驾驶的数据需求降低一个数量级,让车企合作伙伴有望换道超车特斯拉FSD。

从性能上限来看,纯强化学习训练让端到端智驾模型有望通过在提升性能的同时,充分探索多元场景和驾驶风格。未来,端到端智驾体验的上限不再是类人,而是可以拥有超越人类的驾驶表现。

在此基础上,商汤绝影发布与世界模型协同交互的端到端自动驾驶技术路线R-UniAD

作为最专注汽车行业的AI公司,商汤绝影一直在探索和落地以AI的方式解决智驾问题,也持引领端到端自动驾驶的创新潮流

2024年北京车展,商汤绝影展示了UniAD的实车上路成果,量产端到端智驾方案则预计会在年年底交付落地。

商汤绝影的R-UniAD是多阶段强化学习端到端自动驾驶技术路线,具体分为三个阶段,首先是依靠冷启动数据通过模仿学习进行云端的端到端自动驾驶大模型训练;然后基于强化学习,让云端的端到端大模型与世界模型协同交互,持续提升端到端模型的性能;最后云端大模型通过高效蒸馏的方式,实现高性能端到端自动驾驶小模型的车端部署。

因为端到端智驾模型是一个多模态具身模型,最关键的是要与依靠世界模型生成的仿真环境进行在线交互,并获得闭环奖励反馈,从而实现强化学习,使得端到端模型的训练能够充分探索各种可能性。也就是说,能够生成高保真的场景数据、保证长时推演一致性、并支持在线交互的强大世界模型是R-UniAD的核心基石。

在2024年11月绝影实力AI DAY上,王晓刚表示:智驾高端局的竞争不止是车端模型的比拼,端到端的决战,战场在云端。

为此,商汤绝影全新升级并发布行业标杆级别的世界模型——开悟世界模型。世界模型最基础也是最核心的能力是生成高质量视频数据,基于开悟,1个GPU产生的仿真数据相当于500台量产车的数据采集效果。

以绝影量产智驾方案和开悟世界模为核心,实车采集的真实数据和云端生成的仿真数据在车云一体的新范式下进行闭环流转,使得端到端智驾系统的训练更加全面、高效,大幅缩短了研发周期,降低了成本

在现场演示中,商汤绝影展示了开悟世界模型与主车闭环交互的方式。通过场景库文件导入一个BEV视角下的初始主车和他车位置,世界模型自动生成主车视角下11V(11个摄像头)的传感器仿真数据,端到端模型接收到这一数据后,生成自车下一时刻位置并进行反馈,世界模型根据刷新的主车位置和预测的他车位置渲染新的11V传感器仿真数据。

商汤绝影的量产端到端智驾方案预计将在年底交付,「开悟」世界模型也正式用于数据生产,已经抢占新技术路线的先机。在4月即将到来的上海车展上,商汤绝影将重磅发布R-UniAD端到端自动驾驶方案,并完成实车部署,持续引领端到端智驾技术的潮流。