一眼看懂
封面预览
论文聚焦于在数据预算严格受限的条件下,将 Vision-Language-Action (VLA) 模型适配至真实机器人硬件的挑战
- 论文聚焦于在数据预算严格受限的条件下,将 Vision-Language-Action (VLA) 模型适配至真实机器人硬件的挑战
- 核心问题是发现了 “多样性陷阱”:在少量预算下,追求最大覆盖度的传统数据收集策略会因估计噪声而失效,导致策略不稳定
- 研究目标是提出一种有效的数据分配策略,在有限预算下实现稳健的策略学习,并解决所发现的覆盖度-密度权衡问题
Card 01
研究单位
研究单位
- 信息未在提供的 HTML 片段中明确提供(作者名单包括 Yanzhe Chen, Kevin Yuchen Ma, Qi Lv, Yiqi Lin, Zechen Bai, Chen Gao, Mike Zheng Shou,但所属机构未列出)
Card 02
论文概述
论文概述
- 论文聚焦于在数据预算严格受限的条件下,将 Vision-Language-Action (VLA) 模型适配至真实机器人硬件的挑战
- 核心问题是发现了 “多样性陷阱”:在少量预算下,追求最大覆盖度的传统数据收集策略会因估计噪声而失效,导致策略不稳定
- 研究目标是提出一种有效的数据分配策略,在有限预算下实现稳健的策略学习,并解决所发现的覆盖度-密度权衡问题
Card 03
核心贡献
核心贡献
- 发现并实证展示了 VLA 后训练中的多样性陷阱,表现为任务成功率随锚点数量增加呈现倒U型曲线
- 提出了 覆盖度-密度权衡 理论框架,通过数学推导证明了在非零噪声下存在一个内部最优的数据分配方案,挑战了完全多样化采样的最优性
- 提出了 锚点中心适应 两阶段框架,通过锚点重复稳定策略骨架,并通过误差驱动的边界挖掘和残差适应扩展能力,显著提升了有限预算下的真实机器人任务成功率
Card 04
方法描述
方法描述
- 基于流匹配的 VLA 模型架构,将感知与动作解耦,使用预训练 VLM 和任务特定的 动作专家
- ACA 框架分为两阶段:第一阶段为 锚点中心稳定,通过在稀疏锚点上收集重复演示来训练稳定的核心策略;第二阶段为 约束残差适应,通过在识别的边界区域上进行参数高效的微调来扩展策略能力
- 使用 教师强制偏差 进行边界挖掘,通过计算候选条件下的动作预测偏差来识别高风险、覆盖不足的区域
- 在第二阶段中,冻结第一阶段策略,引入通过 低秩适配器 参数化的残差分支进行更新,以防止核心性能下降并实现局部能力扩展
Card 05
数据集与资源
数据集与资源
- 未使用公开数据集,所有数据均为在真实机器人上通过遥操作收集的演示
- 实验任务包括四个真实机器人操作任务:Block Stacking, Cup Placement, Table Cleaning, Toy Tiding
- 模型训练使用 8 NVIDIA H200 GPUs
- 基础模型为流匹配 VLA 模型 π₀ 和 π₀.₅
Card 06
评估与结果
评估与结果
- 评估环境为真实的 7自由度 Franka Panda 机械臂,配备多视角相机系统(RealSense D435 和 D405)
- 主要评估指标为 区域级成功率:定义了三个难度递增的区域 S@1(核心区,25%面积)、S@2(中等区,50%面积)、S@3(近边界区,90%面积)
- 关键结果显示,在三种不同数据预算(50、100、150条轨迹)下,ACA 方法相较于基线 VLA 模型平均任务成功率分别提升 +32.5%、+40.8% 和 +30.9%,验证了其在缓解多样性陷阱方面的有效性