一眼看懂
封面预览
论文提出 VLA-ATTC 框架,旨在为视觉-语言-动作(VLA)模型赋予自适应的测试时计算能力,使其从快速、直觉式的“系统1”推理进化到更具…
- 论文提出 VLA-ATTC 框架,旨在为视觉-语言-动作(VLA)模型赋予自适应的测试时计算能力,使其从快速、直觉式的“系统1”推理进化到更具…
- 框架通过一个基于不确定性的“认知离合器”动态触发审议阶段,并引入一个轻量且高精度的 相对动作评论(RAC) 模型,通过成对比较而非绝对评分来从…
- 核心问题是解决现有 VLA 模型在复杂或模糊场景下因缺乏深思熟虑而导致的次优或灾难性失败,同时克服现有审议方法成本高昂、依赖不稳定绝对评分的瓶…
Card 01
研究单位
研究单位
- 论文作者所属研究机构在提供的 HTML 原文中未明确列出。
Card 02
论文概述
论文概述
- 论文提出 VLA-ATTC 框架,旨在为视觉-语言-动作(VLA)模型赋予自适应的测试时计算能力,使其从快速、直觉式的“系统1”推理进化到更具考虑的“系统2”审议推理。
- 框架通过一个基于不确定性的“认知离合器”动态触发审议阶段,并引入一个轻量且高精度的 相对动作评论(RAC) 模型,通过成对比较而非绝对评分来从候选动作中选择最优动作。
- 核心问题是解决现有 VLA 模型在复杂或模糊场景下因缺乏深思熟虑而导致的次优或灾难性失败,同时克服现有审议方法成本高昂、依赖不稳定绝对评分的瓶颈。
Card 03
核心贡献
核心贡献
- 提出一个无需修改基础模型的即插即用框架 VLA-ATTC,通过“认知离合器”在不确定场景下自适应触发高效的测试时审议阶段。
- 设计了轻量且稳健的 RAC 模型,通过迭代式成对比较识别最优动作,克服了现有并行审议方法的准确性和效率瓶颈。
- 开发了一个全自动数据管道,能从现有数据集中直接生成高质量的动作偏好对,避免了繁重的手工数据标注。
- 实验证明,VLA-ATTC 在 LIBERO-LONG 基准上将 SOTA 模型 PI0.5 的失败率降低了超过 50%,并在真实世界任务中将成功率提升了 17.3%,同时保持实用的控制频率。
Card 04
方法描述
方法描述
- 不确定性量化与“认知离合器”:通过共享视觉-语言模型(VLM)上下文生成两个动作,计算其间的 动态时间规整(DTW) 距离作为不确定性分数。若分数超过阈值,则触发审议阶段。
- 测试时计算(TTC)审议阶段:高效并行生成 N 个候选动作,并采用锦标赛式选择机制,通过 RAC 模型进行迭代成对比较,逐步筛选直至得出单一最优动作。
- 相对动作评论(RAC)模型:采用一种多分支注意力架构的 Transformer,其输入包括两个待比较动作、它们差值及本体感受状态。模型层次性地融合自身特征、VLM 原始特征和蒸馏的查询特征,输出偏好概率。
- 自动偏好数据生成:利用流匹配动作头的生成原理,通过调整积分步数来自动生成高质量(多步)和低质量(少步)动作,从而构建清晰的动作偏好对数据集,用于训练 RAC 模型。
Card 05
数据集与资源
数据集与资源
- 使用 LIBERO-LONG 仿真基准和真实世界的 Agilex Piper 机械臂任务进行评估。
- 基础模型为 PI0 和 PI0.5 VLA 模型,其参数量等具体细节在原文中未明确给出。
- 训练资源、具体计算硬件等细节在原文中未明确说明。
Card 06
评估与结果
评估与结果
- 评估环境包括仿真基准 LIBERO-LONG(10个长序列任务)和真实世界机器人任务(堆叠方块、倒水、清扫垃圾)。
- 主要评估指标为任务成功率。
- 在 LIBERO-LONG 上,VLA-ATTC 将 PI0.5 的平均成功率从 90.6% 提升至 94%(失败率降低 >50%),并将 PI0 的成功率从 82.8% 提升至 90.6%。
- 在真实世界实验中,VLA-ATTC 将 PI0 的平均成功率从 46% 提升至 58.7%(提升12.7%),将 PI0.5 从 52% 提升至 62%(提升10%)。
- 效率分析表明,框架维持了 20.8 Hz 的控制频率,满足实时机器人应用需求。