一眼看懂
封面预览
论文针对 Vision-Language-Action (VLA) 模型在精细操作任务中容易因关键阶段的微小动作错误而导致不可挽回失败的问题…
- 论文针对 Vision-Language-Action (VLA) 模型在精细操作任务中容易因关键阶段的微小动作错误而导致不可挽回失败的问题…
- 核心目标是赋予 VLA 模型在关键阶段预见并避免失败的能力，通过引入额外的计算来模拟候选动作的未来后果，从而选择最优动作。
- 论文还引入了 自主边界学习范式，通过收集成功、失败及边界数据来训练世界模型，使其具备对失败边界的显式意识，从而克服仅基于成功演示训练导致的“乐…
Card 01
研究单位
研究单位
- 香港大学
- 香港科技大学
- 西北大学
Card 02
论文概述
论文概述
- 论文针对 Vision-Language-Action (VLA) 模型在精细操作任务中容易因关键阶段的微小动作错误而导致不可挽回失败的问题，提出了一种名为 DreamAvoid 的测试时梦境框架。
- 核心目标是赋予 VLA 模型在关键阶段预见并避免失败的能力，通过引入额外的计算来模拟候选动作的未来后果，从而选择最优动作。
- 论文还引入了 自主边界学习范式，通过收集成功、失败及边界数据来训练世界模型，使其具备对失败边界的显式意识，从而克服仅基于成功演示训练导致的“乐观幻觉”问题。
Card 03
核心贡献
核心贡献
- 提出了 DreamAvoid 框架，这是一个即插即用的关键阶段测试时梦境框架，由 Dream Trigger、Action Proposer 和 Dream Evaluator 三个模块组成，用于在关键时刻启用后果感知推理。
- 提出了 自主边界学习范式，通过部署初步系统主动探索并收集成功、失败及边界案例数据，用于微调 Dream Evaluator，从而增强其失败感知能力。
- 通过一项试点研究，验证了与仅依赖 VLM 对数值动作序列的直接语义评估相比，利用世界模型进行 显式时空梦境 能更有效地预测精细操作中的失败，为框架设计提供了关键洞察。
Card 04
方法描述
方法描述
- DreamAvoid 框架的核心思想是在常规执行阶段直接运行基础 VLA 策略，仅在 Dream Trigger 检测到即将进入关键阶段时，才触发计算密集的梦境评估过程。
- Dream Trigger 是一个轻量级分类器，基于近期视觉观测和本体感知状态，预测当前是否处于关键阶段，使用软标签和加权二元交叉熵损失进行训练。
- Action Proposer 将基础策略（基于流匹配）的确定性 ODE 推理过程转换为随机 SDE 采样过程，以生成多个多样化的候选动作块，用于探索局部合理的行动假设。
- Dream Evaluator 使用大规模预训练的世界模型 DreamDojo 将每个候选动作向前渲染为未来视觉序列，并通过一个价值模型评估其任务进展增量。价值模型采用 真实-梦境联合训练策略，并使用包含失败和边界数据的优先过采样，结合 Huber 回归损失和排序损失进行训练。
Card 05
数据集与资源
数据集与资源
- 真实世界任务：杯子套接、充电器插入、盖子打开、螺丝插入。
- 机器人平台：AgileX PiperX 机械臂，配备一个 RealSense D455 前置摄像头和两个 RealSense D435 腕部摄像头。
- 模拟基准：LIBERO 和 SimplerEnv。
- 基础策略：π₀.₅（用于真实世界和 LIBERO）和 GR00T-N1.6（用于 SimplerEnv）。
- 世界模型：DreamDojo（蒸馏版本用于推理）。
- 价值模型：基于 VLM 的 Robometer 用于自动生成训练标签。
Card 06
评估与结果
评估与结果
- 评估环境：真实世界机器人操作任务（每项任务 40 次独立试验）和模拟基准（LIBERO 和 SimplerEnv）。
- 主要基准：基础 VLA 策略（π₀.₅）、GPC-RANK（始终在线的候选动作排序方法）。
- 关键指标：任务成功率。
- 真实世界结果：完整方法 DA-ABL 平均成功率达 72.5%，显著超过基础策略（48.8%）和 GPC-RANK（54.4%）。
- 模拟基准结果：在 LIBERO 上平均成功率为 97.8%；在 SimplerEnv 的 Bridge 和 Fractal 数据集上分别达到 63.6% 和 80.7%，均优于基础策略和对比方法。
- 消融研究：验证了 SDE 采样 相比重复 ODE 推理能提供更多样化的候选动作；证明了 Dream Evaluator 的必要性，随机选择会导致成功率下降。