一眼看懂
封面预览
论文核心研究 视觉-语言-动作（VLA）策略 的冻结表示是否编码了与任务成功相关的信息。
- 论文核心研究 视觉-语言-动作（VLA）策略 的冻结表示是否编码了与任务成功相关的信息。
- 研究目标是通过线性探测方法，从冻结的VLA特征中解码出一种“价值类”信号，并验证该信号是否为任务捷径，以及能否用于测试时的动作选择以提升性能。
- 论文旨在回答一个关键问题：仅被训练用于模仿动作的VLA策略，其内部表示是否意外地包含了对未来成功或回报的预测能力。
Card 01
研究单位
研究单位
- 作者所属单位为 北京大学 和 中国农业大学。
Card 02
论文概述
论文概述
- 论文核心研究 视觉-语言-动作（VLA）策略 的冻结表示是否编码了与任务成功相关的信息。
- 研究目标是通过线性探测方法，从冻结的VLA特征中解码出一种“价值类”信号，并验证该信号是否为任务捷径，以及能否用于测试时的动作选择以提升性能。
- 论文旨在回答一个关键问题：仅被训练用于模仿动作的VLA策略，其内部表示是否意外地包含了对未来成功或回报的预测能力。
Card 03
核心贡献
核心贡献
- 发现并证实了一种 价值类信号 可以从多个冻结的VLA骨干网络（如 Pi0.5、OpenVLA）和视觉编码器（如 DINOv2、CLIP）中被解码，该能力远高于进度、时间或任务身份等基线。
- 通过严格的 同任务、同时间步匹配控制实验，排除了价值类信号来源于任务身份或已流逝时间等表面捷径的可能性。
- 将离线探测得到的评分信号，作为测试时候选动作的选择器，成功改变了 Pi0.5 策略的行为，在困难的操作任务（如推盘子）上显著提升了成功率。
Card 04
方法描述
方法描述
- 提出一个分阶段的 探测-选择协议：首先从冻结的模型特征中提取特征并进行标准化线性岭回归探测；然后使用匹配控制去混淆；最后将同一探测模型用于测试时的动作前缀候选排序。
- 创新点在于设计了严格的 匹配配对控制，固定任务和时间步，构建高低值样本对，以此验证探测器的排序能力是否源于真实的状态评估而非捷径。
- 关键技术是使用 蒙特卡洛结果目标 作为探测标签，而非贝尔曼一致的价值估计，并使用仿真器支持的评估器在测试时对候选动作进行排序。
Card 05
数据集与资源
数据集与资源
- 主要使用 LIBERO-Goal 套件作为基准，离线探测使用包含 311,719帧 数据的混合轨迹数据集。
- 使用 CALVIN-D 和 RobotWin 数据集进行跨基准的表示信号检查。
- 主要模型骨干为 OpenVLA 和 Pi0.5 的冻结策略，同时使用 DINOv2、CLIP 等作为视觉编码器对照。
Card 06
评估与结果
评估与结果
- 离线探测实验显示，来自 Pi0.5、OpenVLA 等的特征在预测价值类目标上，任务分割 R² 达到约 0.55，远高于本体感知（0.11）和进度特征（0.03）。
- 在匹配控制实验中，Pi0.5 的探测在固定任务和时间步后，配对排序准确率达到 92.16%，而标签随机对照组仅为 49.67%。
- 在线测试选择实验中，在 push-plate 任务上，使用价值引导选择将成功率从贪婪解码的 26.7% 提升至 44.3%，并在 wine-rack 任务上获得第二个正面案例。