一眼看懂
封面预览
论文提出了 RoboRouter，一个无需训练的机器人操作策略路由框架，旨在解决单一策略泛化能力有限的问题。
- 论文提出了 RoboRouter，一个无需训练的机器人操作策略路由框架，旨在解决单一策略泛化能力有限的问题。
- 该框架通过维护一个异构策略池，利用多模态任务表示和历史执行记录，为每个任务自动选择最合适的策略。
- 论文核心目标是利用现有策略的互补优势，通过智能路由提升机器人操作的成功率和覆盖范围，而无需引入新的单体策略。
Card 01
研究单位
研究单位
- 华南理工大学
- 南京大学
- 新南威尔士大学
- 西南交通大学
- 厦门大学
- 香港理工大学
- 上海科技大学
- 萨拉戈萨大学
Card 02
论文概述
论文概述
- 论文提出了 RoboRouter，一个无需训练的机器人操作策略路由框架，旨在解决单一策略泛化能力有限的问题。
- 该框架通过维护一个异构策略池，利用多模态任务表示和历史执行记录，为每个任务自动选择最合适的策略。
- 论文核心目标是利用现有策略的互补优势，通过智能路由提升机器人操作的成功率和覆盖范围，而无需引入新的单体策略。
Card 03
核心贡献
核心贡献
- 提出了机器人操作领域的策略路由问题，并建立了一个无需训练的路由框架，能够基于任务表示从异构策略池中选择最优策略。
- 设计了一个多智能体框架，包含 Retriever（检索器）、Router（路由器）、Evaluator（评估器）和 Recorder（记录器），通过检索增强推理和执行反馈循环来优化决策。
- 提出了新策略接入机制，仅需轻量级评估即可将新策略集成到池中，无需重新训练，具有良好的可扩展性。
- 在仿真基准 RoboTwin 2.0 和真实机器人平台上进行了广泛实验，验证了框架的有效性。
Card 04
方法描述
方法描述
- 框架由四个基于 LLM/VLM 的智能体协作运行：Retriever 负责构建多模态任务表示并检索历史记录，Router 根据检索结果选择最优策略，Evaluator 分析执行视频生成结构化反馈，Recorder 更新数据库和路由上下文。
- 采用检索增强的推理方式，通过多模态嵌入模型编码指令、图像和元数据，从历史数据库中寻找相似任务以辅助决策。
- 实现了在线闭环反馈机制，利用执行反馈持续优化路由决策，适应环境变化和新策略的加入。
- 整个框架无需训练，避免了神经网络路由器的高昂训练成本和持续学习挑战。
Card 05
数据集与资源
数据集与资源
- 使用 RoboTwin 2.0 作为仿真基准，包含 20 个代表性任务；真实世界评估包含 5 个代表性任务。
- 策略池包含三类基线：单任务策略（ACT, DP, DP3）、多任务 VLA 模型（RDT, π0）和代码组合方法。
- 核心模型组件包括 GPT-4o（主要 VLM）、Ops-MM-embedding-v1-2B（多模态嵌入模型）和 Qwen3-VL-2B-Instruct（重排序器）。
- 实验硬件配置为 Intel i7-14700KF CPU 和两块 NVIDIA RTX A6000 GPU。
Card 06
评估与结果
评估与结果
- 在 RoboTwin 2.0 仿真环境中，RoboRouter 的平均成功率达到 79.85%，优于所有单一基线策略，相比最佳单一策略提升超过 3%。
- 在真实世界实验中，RoboRouter 的平均成功率达到 47%，相比最佳单一基线策略（34%）提升超过 13%。
- 路由准确性在仿真和真实环境中分别达到 96.32% 和 98.63%，路由延迟约为 4.5-4.8 秒，相对于整体执行时间开销可控。
- 消融实验验证了多模态检索、评估器和在线反馈等组件对最终性能的重要贡献。