一眼看懂
封面预览
论文旨在解决具身智能体在长期规划问题中的挑战,结合低层模仿学习的操控能力与高层符号抽象的规划优势
- 论文旨在解决具身智能体在长期规划问题中的挑战,结合低层模仿学习的操控能力与高层符号抽象的规划优势
- 提出双层策略(bilevel policies),由低层神经网络策略和高层符号策略组成,以实现可靠的长期规划
- 核心目标是从低层演示中学习能够泛化到更长视距和更多物体的目标条件策略
Card 01
研究单位
研究单位
- Vector Institute
- University of Toronto
- LAAS-CNRS
- University of Toulouse
- RWTH Aachen University
Card 02
论文概述
论文概述
- 论文旨在解决具身智能体在长期规划问题中的挑战,结合低层模仿学习的操控能力与高层符号抽象的规划优势
- 提出双层策略(bilevel policies),由低层神经网络策略和高层符号策略组成,以实现可靠的长期规划
- 核心目标是从低层演示中学习能够泛化到更长视距和更多物体的目标条件策略
Card 03
核心贡献
核心贡献
- 提出并实现BISON系统,通过双层策略框架学习高层符号策略和低层神经网络策略
- 应用目标回归和归纳泛化技术,从抽象演示中提取并泛化生成紧凑的高层符号策略
- 低层策略通过图神经网络实现,参数量少于33,000,结构紧凑高效
- 实验验证表明BISON在扩展的MetaWorld基准上实现了卓越的泛化能力、效率和长期规划能力
- 高层策略能够解决涉及超过10,000个物体的问题,在忽略低层执行时可在一分钟内完成
Card 04
方法描述
方法描述
- 高层策略学习采用三步流程:从低层演示构建高层抽象轨迹,通过目标回归提取条件-动作规则,进行归纳泛化生成可泛化的策略规则
- 低层策略通过图神经网络实现模仿学习,以高层动作作为条件输入
- 整体框架包含标签函数,将低层状态映射到高层抽象状态,实现双层策略的组合执行
- 采用开放世界规划假设,支持部分可观测环境
Card 05
数据集与资源
数据集与资源
- 使用扩展的MetaWorld基准,包含八个环境:Blocks、Factory、Colour和Gacha及其变体
- 低层策略模型使用图神经网络,参数量少于33,000
- 高层策略采用符号规则表示,无需大量参数
Card 06
评估与结果
评估与结果
- 实验覆盖21,600个场景,与八个基线方法对比,包括VLA、端到端和符号规划方法
- 主要评估指标包括成功率、规划视距泛化能力、物体数量泛化能力、效率(时间和内存)
- 关键结果显示BISON能够解决比端到端和VLA方法更长视距和更多物体的问题,比符号规划方法处理更复杂的环境动态
- 高层策略在纯符号规划任务中表现卓越,可在分钟内解决包含10,000个物体的抽象问题
- 证明了训练和推理阶段的时间和内存效率优势