返回列表 VLA / Vision-Language-Action 每日论文卡
PAPO-VLA: Planning-Aware Policy Optimization for Vision-Language-Action Models
本文旨在解决视觉-语言-动作(VLA)模型在机器人操作任务中的可靠性问题。

论文详情

PAPO-VLA: Planning-Aware Policy Optimization for Vision-Language-Action Models

2026-05-19 · 原文 · 翻译 · 2605.19580

本文旨在解决视觉-语言-动作(VLA)模型在机器人操作任务中的可靠性问题。 论文提出了一种新视角:VLA 策略在执行过程中同时扮演 规划者 和 执行者 双重角色。 核心目标是通过识别并重点优化对任务成功至关重要的“规划动作”,来提升 VLA 策略的可靠性。

3 分钟读完 6 张阅读卡 中国科学院软件研究所
一眼看懂 封面预览

本文旨在解决视觉-语言-动作(VLA)模型在机器人操作任务中的可靠性问题。

  • 本文旨在解决视觉-语言-动作(VLA)模型在机器人操作任务中的可靠性问题。
  • 论文提出了一种新视角:VLA 策略在执行过程中同时扮演 规划者 和 执行者 双重角色。
  • 核心目标是通过识别并重点优化对任务成功至关重要的“规划动作”,来提升 VLA 策略的可靠性。
Card 01 研究单位

研究单位

  • 中国科学院软件研究所
  • 中国科学院大学
Card 02 论文概述

论文概述

  • 本文旨在解决视觉-语言-动作(VLA)模型在机器人操作任务中的可靠性问题。
  • 论文提出了一种新视角:VLA 策略在执行过程中同时扮演 规划者执行者 双重角色。
  • 核心目标是通过识别并重点优化对任务成功至关重要的“规划动作”,来提升 VLA 策略的可靠性。
Card 03 核心贡献

核心贡献

  • 提出并论证了 VLA 策略的双重功能角色观:作为规划者做出任务导向决策,作为执行者通过稠密动作实现决策。
  • 提出了 PAPO-VLA 方法,该方法能够识别规划动作、通过因果充分性与必要性估计其重要性,并将其融入 GRPO 优势估计中。
  • 在多个基准上进行了广泛实验,证明了所提方法的有效性。
Card 04 方法描述

方法描述

  • 规划动作建模:首先通过结合动作变异幅度与轨迹结果来识别轨迹中的关键规划动作。
  • 因果重要性估计:对识别出的规划动作,分别从因果充分性(保留该动作对成功的影响)和因果必要性(扰动该动作对结果的负面影响)两个维度评估其重要性。
  • 策略优化:将规划动作的重要性权重整合到 GRPO 的优势函数估计中,使更重要的动作在优化中获得更强的关注度。
Card 05 数据集与资源

数据集与资源

  • 使用的主要评估基准为 LIBERORoboTwin2.0
  • 实验在 H100 GPU 集群上进行。
  • 模型训练基于现有的 VLA 模型(如 OpenVLA)进行策略优化。
Card 06 评估与结果

评估与结果

  • 评估环境为模拟器中的机器人操作任务,主要评估指标为 任务成功率
  • LIBERO 基准上,该方法在四个子任务套件上均取得了最优的平均成功率(0.96),尤其在 LIBERO-Long 任务上优势明显。
  • RoboTwin2.0 基准上,该方法在不同时长的任务中均表现优异,特别是在长时程任务上,相比基线模型有显著提升。