一眼看懂
封面预览
论文旨在解决 Vision-Language-Action (VLA) 模型中的 状态别名 问题，即视觉相似但所需动作不同的状态被映射为相似的…
- 论文旨在解决 Vision-Language-Action (VLA) 模型中的 状态别名 问题，即视觉相似但所需动作不同的状态被映射为相似的…
- 核心方法是引入 逆动力学学习 作为辅助目标，通过预测当前和未来观测之间的动作，直接监督视觉编码器学习更具判别力的表示。
- 提出了 伪时间反转 数据增强策略，以应对机器人演示数据中动作多样性有限的问题，提升模型泛化能力。
Card 01
研究单位
研究单位
- KAIST (Korea Advanced Institute of Science and Technology)
- Korea University
Card 02
论文概述
论文概述
- 论文旨在解决 Vision-Language-Action (VLA) 模型中的 状态别名 问题，即视觉相似但所需动作不同的状态被映射为相似的特征表示，导致动作预测模糊。
- 核心方法是引入 逆动力学学习 作为辅助目标，通过预测当前和未来观测之间的动作，直接监督视觉编码器学习更具判别力的表示。
- 提出了 伪时间反转 数据增强策略，以应对机器人演示数据中动作多样性有限的问题，提升模型泛化能力。
Card 03
核心贡献
核心贡献
- 提出将 逆动力学学习 作为辅助监督任务，鼓励 VLA 视觉编码器保留决定低级动作的细粒度视觉差异，从而缓解状态别名现象。
- 设计了 伪时间反转 (PTR) 数据增强方法，通过构造伪反向样本扩展动作方向多样性，减少模型对粗粒度方向捷径的依赖。
- 方法可直接应用于多种 VLA 基线架构（如 VLM4VLA, FLOWER, SpatialVLA），在不改变推理流程的情况下实现性能提升。
- 通过冻结编码器探针实验和状态-特征对齐分析，验证了所学表示能更准确地反映机器人状态变化，具有更好的下游任务适应性。
Card 04
方法描述
方法描述
- 在训练过程中，视觉编码器独立提取当前观测 $o_t$ 和未来观测 $o_{t+k}$ 的特征，通过轻量级逆动力学头预测中间的动作序列。
- 将逆动力学预测损失（运动偏移的 L1 损失和夹爪动作的 BCE 损失）作为辅助损失 $\mathcal{L}_{inv}$，与主 VLA 损失联合优化。
- 实施 PTR 策略，随机交换观测顺序并取反动作的运动偏移量，构造伪反向监督信号以增强鲁棒性。
- 训练结束后移除辅助头，保持原始 VLA 模型架构和推理流程完全不变，仅需标准观测-动作数据无需额外标注。
Card 05
数据集与资源
数据集与资源
- CALVIN ABC→D 数据集：用于评估长视野语言条件下的机器人操作任务性能。
- SimplerEnv (Bridge/WidowX) 数据集：用于在模拟环境中评估基于真实世界数据训练的模型表现。
- LIBERO-90 数据集：用于冻结视觉编码器的预训练及后续的表示质量分析。
- 模型基线包括基于 Qwen3VL-8B 的 VLM4VLA、FLOWER 以及 SpatialVLA。
Card 06
评估与结果
评估与结果
- 在 CALVIN 基准上，集成该方法后 FLOWER 模型连续完成 5 个任务的成功率从 77.5% 提升至 81.6%，平均完成序列长度也有所增加。
- 在 SimplerEnv 基准上，该方法将 SpatialVLA 模型的平均任务成功率从 30.2% 提升至 33.3%。
- 冻结编码器评估显示，该方法显著降低了行为克隆训练损失（从 0.152 降至 0.137），并提升了视觉特征距离与机器人状态距离的相关性（从 0.489 提升至 0.600），证明了表示质量的改善。
- 消融实验表明，PTR 增强策略在辅助逆动力学学习的基础上提供了额外的性能增益。