一眼看懂
封面预览
论文针对现有Driving VLAs使用冗长的自然语言推理作为中间接口所面临的数据获取难、模型生成难、推理延迟高以及语言-动作不一致等瓶颈，提…
- 论文针对现有Driving VLAs使用冗长的自然语言推理作为中间接口所面临的数据获取难、模型生成难、推理延迟高以及语言-动作不一致等瓶颈，提…
- 核心思想是使用低熵、可自动生成的一步元动作作为语言接口，替代传统的长推理链，用于提供语义决策基础并引导轨迹生成。
- 论文提出了DriveMA框架，旨在通过可验证的元动作监督与回合级信用分配强化学习，联合优化元动作预测正确性、轨迹质量以及轨迹与元动作的一致性。
Card 01
研究单位
研究单位
- 上海期智研究院
- 清华大学
- 同济大学
Card 02
论文概述
论文概述
- 论文针对现有Driving VLAs使用冗长的自然语言推理作为中间接口所面临的数据获取难、模型生成难、推理延迟高以及语言-动作不一致等瓶颈，提出了一种简洁高效的替代方案。
- 核心思想是使用低熵、可自动生成的一步元动作作为语言接口，替代传统的长推理链，用于提供语义决策基础并引导轨迹生成。
- 论文提出了DriveMA框架，旨在通过可验证的元动作监督与回合级信用分配强化学习，联合优化元动作预测正确性、轨迹质量以及轨迹与元动作的一致性。
Card 03
核心贡献
核心贡献
- 提出了一步元动作作为简洁、有效且可验证的语言域决策接口，替代冗长的推理链。
- 系统性研究了元动作的时间颗粒度，证明一步元动作在表达性与预测可靠性之间取得了最佳平衡。
- 提出了回合级信用分配强化学习框架，通过构建轨迹-元动作一致性奖励并结合密集奖励，有效缓解了Driving VLAs中的语言-动作鸿沟。
- 在WOD-E2E基准上取得了新的最佳性能（SOTA），并在NAVSIM上获得了具有竞争力的结果。
Card 04
方法描述
方法描述
- 提出了基于轨迹块的元动作标注方法，将专家轨迹划分为块并通过轨迹聚类与规则映射自动生成离散的纵向与横向元动作标签。
- 训练采用两阶段监督训练：驾驶动作对齐预训练（使用元动作预测数据与240K驾驶VQA数据）与元动作条件轨迹监督微调（SFT）。
- 提出了回合级信用分配RL框架：采用多回合生成，为元动作预测回合和轨迹生成回合分别设计密集奖励，并引入轨迹-元动作一致性奖励，通过将预测轨迹映射回元动作并与预测元动作比较来衡量一致性，使用回合级优势归一化实现精确信用分配。
Card 05
数据集与资源
数据集与资源
- 主要评估基准：Waymo Open Dataset End-to-End Driving (WOD-E2E) 和 NAVSIM。
- 用于预训练的辅助数据集：WaymoQA、IDKB、LingoQA，共240K样本。
- 模型基于 Qwen3.5 模型家族，主要报告了 2B 和 4B 参数规模的模型。
- 训练资源：原文未明确提及具体使用的GPU或TPU细节。
Card 06
评估与结果
评估与结果
- 评估环境：在WOD-E2E和NAVSIM两个端到端驾驶基准上进行闭环评估。
- 主要评估指标：WOD-E2E使用官方偏好指标RFS（包括Overall和Spotlight），以及轨迹误差ADE；NAVSIM使用综合指标PDMS及其子指标。
- 关键实验结果：DriveMA-2B在WOD-E2E上达到RFS Overall 8.060，DriveMA-4B进一步提升至8.079，均超越先前最佳结果；在NAVSIM上，DriveMA-4B获得PDMS 91.2，优于其他VLA方法。消融实验证明一步元动作接口优于自然语言推理，且提出的RL训练策略显著提升了轨迹与元动作的一致性（L-A Consistency从88.50%提升至98.80%）。