一眼看懂
封面预览
论文提出了 LaST-R1，一个统一的视觉-语言-行动（VLA）框架，该框架在执行动作前引入了基于物理动力学的潜在思维链推理。
- 论文提出了 LaST-R1，一个统一的视觉-语言-行动（VLA）框架，该框架在执行动作前引入了基于物理动力学的潜在思维链推理。
- 研究旨在解决现有VLA模型主要依赖静态模仿学习、且强化学习仅优化动作空间而忽略潜在推理过程的局限性。
- 核心目标是通过一个专为VLA设计的强化学习后训练范式，联合优化潜在推理过程与动作生成，以提升机器人操控任务的鲁棒性、泛化能力和执行效率。
Card 01
研究单位
研究单位
- 香港中文大学
- 北京大学多媒体信息处理重点实验室
- Simplexity Robotics
Card 02
论文概述
论文概述
- 论文提出了 LaST-R1，一个统一的视觉-语言-行动（VLA）框架，该框架在执行动作前引入了基于物理动力学的潜在思维链推理。
- 研究旨在解决现有VLA模型主要依赖静态模仿学习、且强化学习仅优化动作空间而忽略潜在推理过程的局限性。
- 核心目标是通过一个专为VLA设计的强化学习后训练范式，联合优化潜在推理过程与动作生成，以提升机器人操控任务的鲁棒性、泛化能力和执行效率。
Card 03
核心贡献
核心贡献
- 提出了 LaST-R1 统一VLA框架，将基于物理动力学的潜在CoT推理与动作生成紧密集成。
- 提出了 Latent-to-Action Policy Optimization (LAPO)，一种新颖的强化学习算法，能够联合优化潜在推理和动作生成，从而增强对物理世界的建模能力和交互环境中的鲁棒性。
- 设计了 自适应潜在CoT机制，允许策略根据任务复杂性动态调整推理长度，以平衡推理能力与推理效率。
Card 04
方法描述
方法描述
- 模型基于 Qwen3-VL-4B 构建，通过自回归方式生成潜在推理tokens，随后并行解码动作tokens。
- 创新性地使用 DINOv3 视觉基础模型的
- 提出的 LAPO 算法将潜在tokens视为隐式决策变量，通过构建联合的步级似然比，使环境奖励信号能够同时塑造内部推理空间和动作空间。
- 自适应机制通过学习预测
Card 05
数据集与资源
数据集与资源
- 大规模预训练使用了 Open X-Embodiment、RoboMind 和 DROID 等机器人操控数据集。
- 下游任务评估使用 LIBERO 基准，包含四个任务套件。
- 模型参数量为 4B，并在真实世界训练中采用了 LoRA 进行高效参数更新。
- 真实世界实验使用了 Franka Research 3 机械臂（单臂及双臂配置）。
Card 06
评估与结果
评估与结果
- 在 LIBERO 基准上，仅使用单轨迹监督预热，模型达到了接近完美的 99.8% 平均成功率，显著超越了所有现有SOTA方法。
- 在真实世界部署中，经过LAPO后训练，在四个复杂任务上相比初始预热策略取得了高达 44% 的性能提升，平均成功率达到 90%。
- 评估指标为任务 成功率。
- 结果表明，LaST-R1在仿真和真实世界环境中均展现出强大的泛化能力，包括对未见物体、背景变化和光照条件的零样本泛化。