一眼看懂
封面预览
论文提出了 ForceVLA2，一个端到端的视觉-语言-动作框架，旨在赋予机器人混合力-位置控制与显式的力感知能力。
- 论文提出了 ForceVLA2，一个端到端的视觉-语言-动作框架，旨在赋予机器人混合力-位置控制与显式的力感知能力。
- 研究目标是解决当前视觉-语言-动作模型在接触丰富的操作任务中过度依赖位置控制、缺乏力交互感知与调节，从而导致稳定性、精度和鲁棒性不足的问题。
- 该工作通过在多尺度上集成力信息，实现了从任务规划到底层动作生成的闭环、力感知的混合控制。
Card 01
研究单位
研究单位
- 原文中未明确列出所有作者的具体研究机构信息。
Card 02
论文概述
论文概述
- 论文提出了 ForceVLA2，一个端到端的视觉-语言-动作框架，旨在赋予机器人混合力-位置控制与显式的力感知能力。
- 研究目标是解决当前视觉-语言-动作模型在接触丰富的操作任务中过度依赖位置控制、缺乏力交互感知与调节，从而导致稳定性、精度和鲁棒性不足的问题。
- 该工作通过在多尺度上集成力信息，实现了从任务规划到底层动作生成的闭环、力感知的混合控制。
Card 03
核心贡献
核心贡献
- 提出了 ForceVLA2，首个具备力感知的端到端混合力-位置控制VLA框架，通过力提示驱动VLM推理，并利用跨尺度混合专家将力融入动作专家。
- 构建了 ForceVLA2-Dataset，包含1000条轨迹、5个接触丰富的任务（如擦拭、按压、装配），提供多视角图像、任务提示、本体感受状态和力信号等多模态数据。
- 在5个任务上的实验表明，ForceVLA2的平均成功率达到66%，相比 π₀ 和 π₀.5 分别提升了48.0%和35.0%。
Card 04
方法描述
方法描述
- 框架采用双层设计：长期推理模块通过 力提示 注入VLM专家，构建跨阶段的力感知任务概念；短期反应技能使用 跨尺度混合专家 自适应融合任务概念与实时交互力。
- 创新点包括将力作为多尺度信号集成：作为子任务提示与图像融合，以及作为力标记与末端执行器位姿结合，并通过直连通路保留原始信号。
- 采用 流匹配 策略头，以融合的多模态表示为条件，迭代去噪生成混合的末端执行器位姿和力动作指令，实现闭环的、具有上下文感知的控制。
Card 05
数据集与资源
数据集与资源
- 使用了自建的 ForceVLA2-Dataset，包含 1,000 条轨迹和约 500K 同步时间步。
- 数据集涵盖 5 个接触丰富的任务：按压瓶子、清洁花瓶、清洁板、取回盘子和组装齿轮。
- 数据模态包括多视角RGB图像、末端执行器6D姿态、6D力/力矩 信号（300 Hz采集）以及任务和力的文本提示。
- 原文未明确说明模型参数量及训练所用GPU/TPU资源。
Card 06
评估与结果
评估与结果
- 在 5 个真实世界的接触丰富操作任务上评估，基线方法包括 ACP、π₀、π₀.5、ForceVLA 及 π₀ w/ F。
- 主要评估指标为任务 成功率（%），每个任务进行 20 次独立试验。
- 关键结果显示，ForceVLA2平均成功率达到 66.0%，显著优于所有基线。在齿轮组装这一对力最敏感的任务上，成功率达到70.0%，比次优方法高出50个百分点。
- 实验还表明，ForceVLA2能有效避免机械臂过载和接触不稳定等常见失败模式，并在动态干扰和物体搜索任务中展现出优越的适应性和鲁棒性。