文章摘要
自动驾驶行业长期面临的核心难题之一,是如何在真实道路的复杂场景中高效完成模型训练——毕竟城市路况的容错率极低,高危场景无法通过真人试错验证,传统测试模式效率低下且风险极高。近期,百度Apollo推出的

自动驾驶行业长期面临的核心难题之一,是如何在真实道路的复杂场景中高效完成模型训练——毕竟城市路况的容错率极低,高危场景无法通过真人试错验证,传统测试模式效率低下且风险极高。近期,百度Apollo推出的ApolloWorld模型,为这一难题带来了全新解法。

据行业观察,这款模型是全球首个面向物理AI的Agent驱动全模态世界模型,它将整座城市的路网布局、多模态传感器数据与动态车流博弈逻辑完整迁移至云端,支持毫秒级实时交互与长达数十分钟的完整行程推演,一举打破了过往世界模型仅能模拟几十秒孤立片段、且输出为单向静态录像的技术瓶颈。

借助这个虚拟训练平台,无人车在云端的测试里程可实现“日行十万公里”,相当于配备安全员的真实车辆连续测试约3年的总里程,直接将自动驾驶的测试效率提升了数百倍。目前,依托ApolloWorld的24小时云端陪练,萝卜快跑的L4级全无人端到端大模型已正式投入实车运营,全球范围内仅少数企业能实现百辆级无安全员真车上街跑单的规模。

在深圳街头的实测中,无安全员的AI司机展现出了远超新手的老练表现:夜间视线受阻的路段,能提前预判突然闯入的非机动车与行人;路口左转时,可灵活避让从车头前闪过的外卖骑手;面对夜间多车流掉头或窄道会车等复杂场景,绕行与会车的操作丝滑如十年驾龄的老司机。

近期全球世界模型赛道热度高涨,从各类机构推出的三维空间模型到自动驾驶场景的测试模型,不少方案能生成炫酷的街头视频,但这类模型大多停留在“视频渲染器”阶段——仅能静态呈现画面,无法响应外部动作产生动态变化。对此,百度智能驾驶事业群组的技术专家指出,世界模型不应仅作为生成画面的工具,更要成为验证自动驾驶安全性的“考官”。

与这类方案不同,ApolloWorld从设计之初就瞄准了“能互动、能推演路况变化的世界模拟器”,其核心思路是“用AI训练AI,让AI教AI开车”:车端的“学生”是萝卜快跑新一代L4端到端AI Driver基础模型,直接输入多模态传感器信号输出驾驶轨迹;云端的“AI教练”则是ApolloWorld,负责构建闭环仿真环境,为“学生”生成各类场景、提供陪练并打分。

训练过程中,“教练”会生成逼真的街景与雷达点云,并根据“学生”的每一次操作,实时推演周围车流的动态反应,形成持续的闭环训练。一旦“学生”在罕见险情中反应滞后或出现操作失误,“教练”会立即定位短板,生成上千道同类难题反复特训,直到模型掌握完整应对逻辑后才部署到实车。

为衡量训练平台的实用性,百度提出了世界模型的“2+3”评测标准,其中前两项是区分普通视频模型与实用世界模型的核心门槛:因果性,即严格遵循时间单向性,仅能根据过去与当前状态推演下一秒的变化,无法提前预知结局;交互性,即支持动作条件生成,无人车的每一次操作都能带动周围环境的动态改变。

在此基础上,后三项是自动驾驶场景的实战指标:物理准确性,严格符合真实的光学成像与车辆力学规律;持久性,能连贯完成数十分钟的完整行程,不会出现画面或结构漂移;实时性,实现毫秒级响应,推演速度匹配驾驶系统的决策节奏。

结合实测场景,ApolloWorld的表现可分为三个核心关卡:

第一关是物理规律验证,平台并非仅给画面添加滤镜,而是真正掌握现实世界的物理逻辑。切换不同天气模式时,暴雨场景下激光雷达点云会因雨水散射大幅减少,同时能精准呈现前车后轮溅起的水花、无回波区等细节;雪天场景下路边落叶树会自动“掉光”绿叶;夜间场景中车辆经过路灯时,车身阴影会随光源位置动态变化。这些效果并非来自人工编写的公式,而是模型学习超10亿帧真实数据后自主掌握的规律。此外,雨天路滑时刹车距离的变化、洒水车水柱冲移锥桶等场景,也能被平台完整推演,训练无人车应对突发障碍的能力。

第二关是动态博弈能力,传统仿真测试采用实车日志回放,无人车临时变道时,周围车辆不会配合调整路线,导致测试失真。而ApolloWorld构建了智能体驱动架构,将场景中的每一辆车、骑手、行人都建模为具备独立感知与决策能力的AI智能体,测试人员还能调整车流密度、旁车激进程度,主动提升测试难度。例如,高架匝道口的会车场景中,无人车选择驶上高架或走地面辅路,周围车辆会自动做出对应反应;路口“鬼探头”测试中,骑车人突然冲出后,无人车能紧急制动,甚至在无人车停下后,骑车人会主动后退让出安全距离,还原真实的交互逻辑。

第三关是长途连续推演能力,过往世界模型大多仅能模拟几十秒的单一场景,拉长行程后容易出现画面或结构崩塌。而ApolloWorld支持无人车在虚拟城市中完成数十分钟的完整行程,从接单、载客到送达的全流程连贯推演。在香港虚拟城的实测中,4辆无人车从同一起点出发,前往不同目的地,最终都平稳完成了行程,全程没有出现画面漂移。平台还能设置不同车流密度并行测试,模拟早晚高峰的复杂路况,检验无人车的连续通行能力。

这套训练平台的技术突破,源于两大核心能力:一是多模态联合生成与三维地图先验,在生成相机画面的同时同步生成激光雷达点云,引入高精度三维道路结构,确保长期推演中街景不会变形,且能准确判定两车擦碰等物理交互;二是基于因果自回归架构的实时加速,将模型响应控制在33毫秒以内,匹配车载系统的决策节奏。

对于自动驾驶业务而言,ApolloWorld大幅缩短了测试周期:传统模型迭代需要超70万公里的实车路测,耗时数月,而借助云端训练,大部分高危场景可在并行运算中完成,真车仅需完成最终验证,周期可缩短至数天。在开拓新城市时,这套方案也极具优势,例如香港的右舵左行场景,平台依托前期采集的道路数据搭建虚拟环境,让无人车在云端反复练习环岛让行、窄路会车等场景,仅用数月就拿下了当地的全无人测试牌照。

目前,萝卜快跑已在全球28座城市落地,累计提供超2300万次出行服务,总里程突破3.5亿公里,其中全无人驾驶里程超2.4亿公里,是全球唯一在左右舵市场均开展实践的平台。真实路测数据与云端训练形成了双向循环,让虚拟训练越来越贴近现实,也让实车测试的效率不断提升。

随着这套“真实数据收集+云端强化训练”的体系跑通,自动驾驶的底层技术范式迎来了变革:过去依赖人工编写规则的模式,扩展僵化且难以应对未知场景;而端到端模型通过吸收海量驾驶数据,学会了在复杂车流中自然博弈,ApolloWorld则解决了端到端模型的“黑盒安全验证”难题,为大规模无安全员车队上路提供了底气。

更重要的是,这套体系打破了困扰无人驾驶行业十年的“安全、智能、规模”不可能三角,改写了赛道的竞争壁垒——从靠堆人力和重资产扩张的模式,转向由真实数据与云端算力驱动的规模化训练。这种模式不仅适用于自动驾驶,还能适配机器人等各类物理AI场景,为全球近万亿美元规模的物理AI产业带来了新的发展可能,无人驾驶乃至整个物理AI产业期待已久的“AGI时刻”,也由此到来。

以上内容不代表本平台立场,仅供读者参考