一眼看懂
封面预览
论文提出MAPLE框架，旨在解决现有VLA模型在闭环设置下训练脆弱、缺乏反应环境建模的问题。
- 论文提出MAPLE框架，旨在解决现有VLA模型在闭环设置下训练脆弱、缺乏反应环境建模的问题。
- 核心创新是在VLA模型的潜在空间中进行多智能体场景推演，实现闭环、多步骤的智能体交互训练。
- 研究目标是通过引入反应式智能体和多样性奖励，提升端到端自动驾驶系统在复杂交互场景中的鲁棒性与性能。
Card 01
研究单位
研究单位
- Qualcomm AI Research
- Qualcomm Technologies, Inc
Card 02
论文概述
论文概述
- 论文提出MAPLE框架，旨在解决现有VLA模型在闭环设置下训练脆弱、缺乏反应环境建模的问题。
- 核心创新是在VLA模型的潜在空间中进行多智能体场景推演，实现闭环、多步骤的智能体交互训练。
- 研究目标是通过引入反应式智能体和多样性奖励，提升端到端自动驾驶系统在复杂交互场景中的鲁棒性与性能。
Card 03
核心贡献
核心贡献
- 提出一种无模拟器的多智能体潜在空间推演机制，在SFT与RL阶段联合推进自车与周围反应式智能体。
- 引入多样性奖励，鼓励模型生成超越驾驶日志数据的行为，丰富多智能体交互并防止策略崩塌。
- 在Bench2Drive基准上达到SOTA性能，驾驶分数提升25%以上，并在多项能力测试中取得领先结果。
Card 04
方法描述
方法描述
- 模型架构基于VLA骨干网络，包含视觉编码器、地图编码器、LLM及多个任务头（检测、地图分割、运动预测、规划）。
- 创新点在于潜在空间多智能体推演：将自车与周围智能体编码为潜在令牌，通过自回归方式推演未来场景，无需像素级模拟。
- 训练框架分为三阶段：预训练（学习稳定令牌表示）、监督微调（模仿学习轨迹）、强化学习（使用GRPO优化，结合全局、车辆特定及多样性奖励）。
Card 05
数据集与资源
数据集与资源
- 使用Bench2Drive基准进行训练与评估，该基准基于CARLA模拟器，包含1000个驾驶片段（950训练，50验证）。
- 模型骨干网络为Qwen2.5-1.5B-VL，视觉编码器为EVA预训练的ViT，规划头采用VAE架构。
- 训练资源为8块NVIDIA H100 GPU，执行三阶段训练（预训练12 epochs，SFT 24 epochs，RL 12 epochs）。
Card 06
评估与结果
评估与结果
- 评估环境为Bench2Drive闭环基准，涵盖220条路线与44种交互场景，采用驾驶分数（DS）、成功率（SR）、效率、舒适度及多能力测试等指标。
- 在闭环评估中，MAPLE达到最高驾驶分数（88.3）和成功率（70.5），显著优于现有SOTA方法。
- 消融实验证实，多智能体推演与多样性奖励机制将驾驶分数提升12.3分，成功率提升7.9%，多规划器设置进一步带来额外增益。