一眼看懂
封面预览
论文提出了 VLA-Thinker，首个能够进行“思考-图像”推理的视觉-语言-动作模型，将视觉感知建模为可动态调用的推理动作。
- 论文提出了 VLA-Thinker，首个能够进行“思考-图像”推理的视觉-语言-动作模型，将视觉感知建模为可动态调用的推理动作。
- 旨在解决现有VLA模型思维链推理局限于文本范式、视觉输入被视为静态上下文，导致无法主动获取信息以解决歧义或从错误中恢复的问题。
- 通过实现感知、推理与动作的交替协同过程，提升模型在长时域操作任务中的数据效率与决策鲁棒性。
Card 01
研究单位
研究单位
- University of Central Florida
- University of Würzburg
- University of Southern California
- NVIDIA Research
Card 02
论文概述
论文概述
- 论文提出了 VLA-Thinker，首个能够进行“思考-图像”推理的视觉-语言-动作模型，将视觉感知建模为可动态调用的推理动作。
- 旨在解决现有VLA模型思维链推理局限于文本范式、视觉输入被视为静态上下文，导致无法主动获取信息以解决歧义或从错误中恢复的问题。
- 通过实现感知、推理与动作的交替协同过程，提升模型在长时域操作任务中的数据效率与决策鲁棒性。
Card 03
核心贡献
核心贡献
- 首次提出并实现了 thinking-with-image reasoning 范式，将视觉感知作为动态可调用的推理动作，实现多模态具身思维链。
- 提出了一个结合监督微调冷启动与基于 GRPO 的轨迹级强化学习的两阶段训练框架，有效对齐完整推理-动作轨迹与任务成功目标。
- 在多个具身智能基准测试（LIBERO 和 RoboTwin 2.0）上取得了显著性能提升，在 LIBERO 基准上达到了 97.5% 的平均成功率。
Card 04
方法描述
方法描述
- 将VLA推理重构为一个迭代的多模态交错推理过程，模型可以在推理步骤中主动调用视觉工具（如 ZOOM-IN）以获取任务相关的细粒度视觉证据。
- 采用两阶段训练策略：第一阶段使用合成的具身思维链数据监督微调，激活模型的结构化推理与工具使用能力；第二阶段使用 Group Relative Policy Optimization (GRPO)，以任务成功为稀疏奖励，对完整的推理-动作轨迹进行因果对齐。
- 创新点在于将感知从静态输入转变为主动、可调用的推理组件，并通过轨迹级优化实现推理步骤、感知调用与环境动作的联合优化。
Card 05
数据集与资源
数据集与资源
- 使用 LIBERO 和 RoboTwin 2.0 作为主要评估基准。
- 模型基于 OpenVLA-OFT 初始化，采用 LLaMA2-7B 作为语言骨干。
- 训练在8块 NVIDIA H100 GPU 上进行，完整训练过程约需3天。
Card 06
评估与结果
评估与结果
- 在 LIBERO 基准上，VLA-Thinker 达到了 97.5% 的平均成功率，相比骨干模型 OpenVLA-OFT 提升 6.5%，并在所有子任务套件上取得最佳表现。
- 在 RoboTwin 2.0 基准上，模型在不同时域长度的任务上均取得显著进步，短时域、中时域和长时域任务的平均成功率分别为 62.3%、70.7% 和 64.6%，验证了其在复杂双臂操作和长时序规划中的有效性。
- 消融实验证实，“思考-图像”推理机制与两阶段训练管道均对性能提升至关重要，单独使用任一阶段均无法达到完整方法的最佳效果。