一眼看懂
封面预览
研究 primitive-aware training 是否能让 Vision-Language-Action (VLA) 模型在测试时通过少量示范适应新任务，无需权重更新
- 研究 primitive-aware training 是否能让 Vision-Language-Action (VLA) 模型在测试时通过少量示范适应新任务，无需权重更新
- 探讨数据结构（flat trajectories 与 primitive-segmented episodes）对模型组合泛化能力的影响
- 解决工业部署中每项新任务需单独微调的高成本问题，寻求更高效的少样本迁移方案
Card 01
研究单位
研究单位
- 论文作者包括 Anya Singh、Cabrel Happi、Jai Relan、Varun Nair 和 Vidyut Baradwaj
- 作者联系方式显示为 as@rellingsystems.com，但文中未明确标注具体研究机构名称
Card 02
论文概述
论文概述
- 研究 primitive-aware training 是否能让 Vision-Language-Action (VLA) 模型在测试时通过少量示范适应新任务，无需权重更新
- 探讨数据结构（flat trajectories 与 primitive-segmented episodes）对模型组合泛化能力的影响
- 解决工业部署中每项新任务需单独微调的高成本问题，寻求更高效的少样本迁移方案
Card 03
核心贡献
核心贡献
- 对两种不同架构的 VLA（OpenVLA-7B 与 π_{0.5}）在两个数据集上进行控制性对比，证明 primitive-aware training 在 m=3–5 示范下具有 2–3× 样本效率优势
- 通过子空间消融干预建立因果机制：消融 primitive-decodable 子空间导致少样本成功率下降 32 百分点，而消融随机子空间无显著影响
- 发现并修正 chunked-policy 评估中的方法论陷阱：家族膨胀导致的错误拒绝率高达 42%，并提出校正的元素级门控
Card 04
方法描述
方法描述
- 采用 2×2 实验设计，在 OpenVLA-7B（自回归）和 π_{0.5}（流匹配）上对比 flat training 与 primitive-aware training
- 使用 LoRA 微调，锁定超参数（rank=32, α=64, lr=5×10^{-5}），仅改变数据视图（flat vs. primitive-segmented）
- 少样本迁移协议：测试时提供 m∈{0,1,3,5,10} 个示范，编码后与语言提示拼接，模型在无权重更新下执行留出任务
- 因果验证：使用线性探针识别 primitive-encoding 子空间，在推理时投影到其正交补空间进行消融
Card 05
数据集与资源
数据集与资源
- 主数据集：REASSEMBLE（接触丰富的工业装配，17 物体、4 primitive、4551 示范）
- 复制数据集：LIBERO-Long（家居操控任务，含多步结构）
- 模型：OpenVLA-7B（自回归，7B 参数）和 π_{0.5}（流匹配，16-step action chunks）
- 训练资源：文中未详细说明 GPU/TPU 使用，但提及 bf16 精度、batch size 32、30k steps
Card 06
评估与结果
评估与结果
- 评估基准：REASSEMBLE 上 6 个留出任务（物体-任务序列组合）和 LIBERO-Long 多步任务
- 关键指标：成功率、示范数 m、零样本 vs. 少样本差距、成分距离
- 主要结果：primitive-trained 模型在 m=3 时达 fine-tuned 上界的 78%，flat-trained 模型需 m=10 才达同等水平（3× 样本效率差距）
- 消融结果：primitive 子空间消融使成功率从 0.62–0.66 降至 0.30–0.34，随机子空间消融无显著影响
- 局限性：对训练词汇中不存在的 primitive 类型任务（如 rotate-to-engage），primitive-aware training 表现不如 flat training