一眼看懂
封面预览
论文提出 VILAS，一个完全低成本、模块化的机器人操作平台，旨在支持端到端的 VLA（视觉-语言-动作）策略学习与部署。
- 论文提出 VILAS，一个完全低成本、模块化的机器人操作平台，旨在支持端到端的 VLA（视觉-语言-动作）策略学习与部署。
- 核心目标是在低成本硬件上实现脆弱物体的安全抓取，降低机器人学习系统的财务门槛。
- 解决了现有平台成本高昂、软抓手设计特定化、以及依赖昂贵力传感模块等问题。
Card 01
研究单位
研究单位
- Drexel University （主要作者所属）
- Virginia Tech （Virginia Seafood Agricultural Research and Extension Center）
- Amazon Store Foundation AI (SFAI)
Card 02
论文概述
论文概述
- 论文提出 VILAS，一个完全低成本、模块化的机器人操作平台，旨在支持端到端的 VLA（视觉-语言-动作）策略学习与部署。
- 核心目标是在低成本硬件上实现脆弱物体的安全抓取，降低机器人学习系统的财务门槛。
- 解决了现有平台成本高昂、软抓手设计特定化、以及依赖昂贵力传感模块等问题。
Card 03
核心贡献
核心贡献
- 设计并实现了 VILAS 平台，该平台集成了低成本组件，支持遥操作数据收集、策略微调和实时部署的完整 VLA 工作流程。
- 设计了一种基于 kirigami 的软顺应性末端执行器扩展，可在无需显式力传感的情况下实现脆弱物体的安全抓取。
- 在同一硬件和数据集上部署并评估了三个先进的 VLA 模型（π₀、π₀.5、GR00T N1.6），提供了实际部署的实证见解。
Card 04
方法描述
方法描述
- 系统采用基于 ZMQ 的通信架构，统一协调 Fairino FR5 机械臂、Jodell RG52-50 电动夹爪和双相机感知模块。
- 创新的 kirigami 软抓手结构通过可控的变形模式吸收接触力变化，实现被动安全抓取。
- VLA 模型采用动作分块策略，通过单次推理生成一串动作，以解耦高频控制与模型推理。
Card 05
数据集与资源
数据集与资源
- 使用自建的葡萄抓取演示数据集，包含 100个 示范视频，每个包含 1200帧。
- 评估的三个 VLA 模型为：π₀、π₀.5 和 GR00T N1.6，均从公开预训练检查点微调。
- 微调在 NVIDIA H200 GPU 上进行，共 50,000次 优化迭代。
Card 06
评估与结果
评估与结果
- 评估任务为桌面葡萄抓取，要求机器人顺序抓取三个葡萄并放入目标盒子。
- 评估指标为 单次抓取成功率 和 多次抓取成功率（连续成功两次以上）。
- 关键结果：GR00T N1.6 多次抓取成功率最高（58%），π₀.5 单次抓取成功率最高（84%）。所有模型均可成功在低成本硬件上训练和部署。