一眼看懂
封面预览
论文提出了一个名为 NS-VLA 的神经符号视觉-语言-动作模型框架，旨在解决现有VLA模型在结构感知、数据效率和探索能力方面的不足。
- 论文提出了一个名为 NS-VLA 的神经符号视觉-语言-动作模型框架，旨在解决现有VLA模型在结构感知、数据效率和探索能力方面的不足。
- 该框架通过符号编码器提取结构化原语，使用符号求解器实现高效动作序列生成，并利用在线强化学习优化模型，从而在低数据条件下实现高性能和强泛化能力。
- 提出了神经符号编码与嵌入模块，能够从视觉和语言输入中提取结构化的可重用原语计划。
Card 01
研究单位
研究单位
- 北京邮电大学
- 南洋理工大学
Card 02
论文概述
论文概述
- 论文提出了一个名为 NS-VLA 的神经符号视觉-语言-动作模型框架，旨在解决现有VLA模型在结构感知、数据效率和探索能力方面的不足。
- 该框架通过符号编码器提取结构化原语，使用符号求解器实现高效动作序列生成，并利用在线强化学习优化模型，从而在低数据条件下实现高性能和强泛化能力。
Card 03
核心贡献
核心贡献
- 提出了神经符号编码与嵌入模块，能够从视觉和语言输入中提取结构化的可重用原语计划。
- 设计了轻量级的符号求解器，通过查询驱动的视觉令牌稀疏化和分块动作生成，提高了数据效率和实时性能。
- 实现了在线强化学习优化策略，通过原语分段奖励和群体相对优化策略，在稀疏奖励下稳定地提升策略性能，扩大了探索空间。
Card 04
方法描述
方法描述
- 模型由三个核心组件组成：神经符号编码器、符号求解器和在线强化学习优化器。
- 神经符号编码器利用预训练的VLM提取特征并生成原语计划，符号分类器通过计划约束的推理来跟踪执行进度。
- 符号求解器采用查询条件的Top-K令牌稀疏化来压缩视觉输入，并使用因果Transformer生成动作分块。
- 在线强化学习部分，将问题建模为POMDP，设计了原语分段奖励和基于KL散度约束的群体相对优化策略来训练轻量级模块。
Card 05
数据集与资源
数据集与资源
- 使用的数据集包括 LIBERO、LIBERO-Plus 和 CALVIN 机器人操作基准。
- 模型参数规模为 2B。
- 训练资源信息未在提供的文本片段中明确说明。
Card 06
评估与结果
评估与结果
- 评估在 LIBERO 和 LIBERO-Plus 基准上进行，采用 成功率 (SR%) 作为主要评估指标。
- 在低资源（1-shot）训练设置下，NS-VLA在LIBERO基准上的平均成功率达到 69.1%，显著优于其他基线方法。
- 在使用全量数据训练并在更具挑战性的LIBERO-Plus基准上测试时，NS-VLA取得了 79.4% 的平均成功率，展现了卓越的泛化能力。