一眼看懂
封面预览
针对 视觉-语言-动作(VLA)模型 通常假设机器人处于完美物理状态,无法适应关节退化、执行器故障等现实物理故障的问题,提出了 故障感知(健康…
- 针对 视觉-语言-动作(VLA)模型 通常假设机器人处于完美物理状态,无法适应关节退化、执行器故障等现实物理故障的问题,提出了 故障感知(健康…
- 该模型将描述机器人关节运行角度和扭矩能力的 健康向量 作为输入,并调整其动作预测,以使用退化关节完成任务。
- 论文通过在 LIBERO 环境中收集机器人故障数据并训练模型,证明了轻量级的修改即可显著提升模型对退化关节的适应能力。
Card 01
研究单位
研究单位
- 论文作者 Hüseyin ARSLAN 和 Özgür ERKENT 所属研究机构(原文中未明确列出,可推断为机器人控制相关学术机构)
Card 02
论文概述
论文概述
- 针对 视觉-语言-动作(VLA)模型 通常假设机器人处于完美物理状态,无法适应关节退化、执行器故障等现实物理故障的问题,提出了 故障感知(健康条件化)VLA 模型。
- 该模型将描述机器人关节运行角度和扭矩能力的 健康向量 作为输入,并调整其动作预测,以使用退化关节完成任务。
- 论文通过在 LIBERO 环境中收集机器人故障数据并训练模型,证明了轻量级的修改即可显著提升模型对退化关节的适应能力。
Card 03
核心贡献
核心贡献
- 提出了健康条件化VLA问题与方法:通过将 健康向量(每个关节的健康值)集成到预训练VLA模型中,仅需少于1M参数的轻量级 健康投影器,即可显著提升模型适应受限关节的能力。
- 引入了故障数据收集框架:设计了一个可通过鼠标和键盘远程操作 LIBERO 仿真任务的框架,允许定义不同等级的关节退化,并收集了相应的故障演示数据。
- 提出了系统性的评估指标:提出了在 LIBERO 空间任务上,系统衡量 VLA-Adapter 在不同关节退化组合条件下的性能能力的评估方法。
Card 04
方法描述
方法描述
- 基础模型采用 VLA-Adapter Pro,它包含一个冻结的 Qwen2.5-0.5B 语言模型、融合的 DINOv2–SigLIP 视觉编码器和一个经L1回归训练的动作头部。
- 创新点在于引入了 健康投影器,这是一个两层MLP,将7维健康向量映射到主干LLM的嵌入空间(R^896),并以零初始化确保训练初始时不影响预训练动作头部。
- 健康特征被以元素方式添加到本体感觉特征中,通过适配器令牌送入注意力块,从而在不改变令牌计数的情况下融合健康信息。
- 该方法仅训练 健康投影器(约810K参数)和 动作查询(约57K参数),总计约900K可训练参数,对计算资源要求极低。
Card 05
数据集与资源
数据集与资源
- 使用 LIBERO 空间任务套件进行数据收集、训练和评估。
- 共收集了128个远程操作故障演示(涵盖不同关节退化配置)和50个来自预训练模型的成功健康演示。
- 训练使用单张 NVIDIA L40S GPU,批次大小为8,累积梯度2步,使用AdamW优化器(学习率2e-4),训练15K步。
- 模型参数量很小,仅约900K可训练参数,基础模型主干保持冻结。
Card 06
评估与结果
评估与结果
- 评估环境为 LIBERO 空间任务,基准为预训练的 VLA-Adapter Libero-Spatial-Pro 模型。
- 主要评估指标为二元 任务成功率。
- 基线脆弱性分析:预训练模型在健康状态下成功率达97.5%,但关节退化导致严重脆弱性。关键关节(肩关节J1、肘关节J3)在轻微退化(w=0.3)时成功率急剧下降(45%,42.5%),中度及以上退化(w>=0.7)时完全失效。
- 健康条件化结果:提出的模型在健康状态下成功率为99.0%,与基线相当。在关键退化关节上表现显著提升:肩关节J1在w=0.3时从45%提升至89%,肘关节J3在w=0.5时从0%提升至34%。
- 结果表明,轻量级的健康投影模块能使模型学会补偿策略,在许多关节退化组合下成功完成任务,而预训练模型无法应对。