一眼看懂
封面预览
论文提出了 AtomicVLA,这是一个统一的规划和执行框架,旨在解决机器人在长视野任务和持续技能获取中的挑战。
- 论文提出了 AtomicVLA,这是一个统一的规划和执行框架,旨在解决机器人在长视野任务和持续技能获取中的挑战。
- 解决了现有视觉-语言-动作(VLA)模型使用单一动作解码器导致技能扩展性差、持续学习中出现灾难性遗忘以及异构技能之间相互干扰的问题。
- 该框架通过构建可扩展的原子技能库和动态专家组合机制,实现了高层任务规划与底层动作执行的统一。
Card 01
研究单位
研究单位
- Sun Yat-sen University
- Peng Cheng Laboratory
- Yinwang Intelligent Technology Co. Ltd.
Card 02
论文概述
论文概述
- 论文提出了 AtomicVLA,这是一个统一的规划和执行框架,旨在解决机器人在长视野任务和持续技能获取中的挑战。
- 解决了现有视觉-语言-动作(VLA)模型使用单一动作解码器导致技能扩展性差、持续学习中出现灾难性遗忘以及异构技能之间相互干扰的问题。
- 该框架通过构建可扩展的原子技能库和动态专家组合机制,实现了高层任务规划与底层动作执行的统一。
Card 03
核心贡献
核心贡献
- 提出了 AtomicVLA 端到端框架,统一了任务规划和动作执行,支持长视野任务和持续技能扩展。
- 设计了 Skill-Guided Mixture-of-Experts (SG-MoE) 架构和可扩展的技能路由器,用于构建原子技能专家库。
- 引入了自适应的 Thinking 和 Acting 模态切换机制,以及基于主轴分析的轨迹原子动作分解方法。
- 在仿真平台和真实机器人上验证了方法的有效性,显著缓解了技能干扰和灾难性遗忘问题。
Card 04
方法描述
方法描述
- 采用 Think-Act 统一架构,模型根据当前状态预测特殊标记
[think]或[act]以自适应切换任务规划模式或动作执行模式。 - SG-MoE 架构包含一个共享专家(保持预训练能力)和多个原子技能专家(专精特定技能),通过稀疏激活策略由路由器选择专家。
- 提出了基于扩散模型噪声调度的原子技能嵌入方法,将技能抽象映射为固定的高维向量以指导路由。
- 持续学习机制允许通过仅训练新增专家和扩展路由器来学习新技能,避免重新训练整个模型,从而防止遗忘。
Card 05
数据集与资源
数据集与资源
- 仿真基准测试:LIBERO(包含 Spatial, Object, Goal, Long 四个任务套件)和 CALVIN(ABC->D 分割)。
- 真实世界数据:使用 Franka 机械臂采集了 550 条轨迹,包含 3 个长视野任务和 5 个短视野任务。
- 基础模型:基于 $\pi_{0}$ 和 $\pi_{0.5}$ 视觉-语言-动作基础模型进行构建。
- 模型配置:LIBERO 和真实实验使用 5 个技能专家,CALVIN 使用 8 个技能专家。
Card 06
评估与结果
评估与结果
- 评估环境:LIBERO 和 CALVIN 仿真基准测试,以及真实世界 Franka 机器人实验。
- 主要指标:任务成功率(%)、平均成功任务长度。
- LIBERO 结果:AtomicVLA 平均性能优于 $\pi_{0}$ 2.4%,在 LIBERO-LONG 上提升 10%。
- CALVIN 结果:在 ABC->D 设置下,平均任务长度分别比 $\pi_{0}$ 和 $\pi_{0.5}$ 提高 0.22 和 0.25。
- 真实世界结果:在长视野任务中优于基线 18.3%,在持续学习任务中优于基线 21%,有效验证了原子技能动态组合机制的有效性。