一眼看懂
封面预览
提出 SimVLA,一个设计简洁的 Vision-Language-Action (VLA) 基准模型,旨在解决当前该领域因模型架构复杂、训练…
- 提出 SimVLA,一个设计简洁的 Vision-Language-Action (VLA) 基准模型,旨在解决当前该领域因模型架构复杂、训练…
- 研究目标是建立一个 模块化、可复现的强基线,清晰地将感知(视觉语言理解)与控制(动作生成)解耦,并通过标准化关键训练细节来实现高性能,以便未来…
- 提出了 SimVLA,一个模块化的 VLA 基线模型,通过解耦感知与控制(使用标准的视觉语言主干网络和轻量级动作头),实现了灵活和面向未来的设…
Card 01
研究单位
研究单位
- Frontier Robotics
Card 02
论文概述
论文概述
- 提出 SimVLA,一个设计简洁的 Vision-Language-Action (VLA) 基准模型,旨在解决当前该领域因模型架构复杂、训练方法不统一而难以公平比较的问题。
- 研究目标是建立一个 模块化、可复现的强基线,清晰地将感知(视觉语言理解)与控制(动作生成)解耦,并通过标准化关键训练细节来实现高性能,以便未来能够准确评估架构创新的价值。
Card 03
核心贡献
核心贡献
- 提出了 SimVLA,一个模块化的 VLA 基线模型,通过解耦感知与控制(使用标准的视觉语言主干网络和轻量级动作头),实现了灵活和面向未来的设计。
- 识别并标准化了影响 VLA 性能的“隐性”驱动因素(如数据洗牌策略、动作空间归一化、优化动态),提供了一个严谨的训练方法,以实现公平的跨模型比较。
- 证明了这种极简设计能够实现 state-of-the-art 的性能,在模拟基准测试中超越了更大、更复杂的模型,同时实现了高效的零样本场景泛化和真实机器人部署。
Card 04
方法描述
方法描述
- SimVLA 采用 感知-控制解耦 的模块化设计:使用一个预训练的视觉语言模型(VLM)作为编码器来处理多视角RGB图像和语言指令,生成融合的表示;然后由一个轻量级的 Transformer 编码器 作为动作头,使用条件流匹配 在归一化的连续动作空间中生成未来的动作块。
- 创新点在于其极简架构,避免了复杂的时空先验、记忆模块或多阶段推理流程。关键技术包括:流匹配 用于生成平滑、时间一致的动作块;以及一套严格标准化的训练方法,确保性能增益可归因于架构本身而非实现细节。
Card 05
数据集与资源
数据集与资源
- 使用的数据集包括:LIBERO、LIBERO-PRO、SimplerEnv (Fractal/BridgeData-V2) 以及 Galaxea Open-World Dataset。
- 模型总参数量约为 0.5B,其中视觉语言主干可选择 SmolVLM-0.5B 或 Florence-2。
- 训练资源涉及 GPU,具体数量未在提供片段中明确说明。
Card 06
评估与结果
评估与结果
- 评估环境包括仿真基准(LIBERO, LIBERO-PRO, SimplerEnv)和真实机器人(Galaxea R1 Lite)。
- 主要评估指标是任务成功率 (%)。
- SimVLA 在 LIBERO 基准上取得了 98.6% 的平均成功率(四个套件的平均),超越了所有对比模型(包括数十亿参数的大型模型)。在LIBERO-PRO 鲁棒性测试中,其在语义扰动维度上表现最佳,证明了更强的泛化能力。在 SimplerEnv 和 WidowX 机器人任务上也达到了 95.8% 的平均成功率。在真实机器人上的零样本部署表现与强大的 π0.5 基线相当。