• Northeastern University (美国波士顿)
• Consiglio Nazionale delle Ricerche (意大利热那亚)
• Columbia Sportswear (美国波特兰)
• KINETICAI INC (美国德克萨斯州)
• Sunbelt Rentals Inc (美国南卡罗来纳州)
• Bmade Robotics, University College London (英国伦敦)

• 本文是一篇关于通用物理智能（General Physical Intelligence, GPI）在敏捷制造自动化中应用的综述性论文，系统性地调研了Vision-Language-Action（VLA）基础模型的最新进展
• 针对中小企业（SMEs）在迈向工业5.0过程中面临的技术基础设施有限、预算紧张、技能人才短缺等挑战，探讨如何通过GPI实现灵活、安全、人机协作的智能制造
• 核心问题在于：如何将现有的VLA基础模型转化为能够在真实工业环境中执行接触丰富操作、具备物理 grounded 推理能力的GPI系统

• 提出了六支柱分类框架，系统组织GPI相关技术：多模态3D表示与空间推理、数据生成与sim-to-real迁移、长程规划与技能序列、动作生成与具身控制、不确定性估计与安全保证、基准测试与评估协议
• 设计了GPI架构的消融研究，对比分析Gato-GPI、RT2-GPI、PaLM-E-GPI、OpenVLA-GPI等变体在螺母-螺栓装配和木材面板灵巧操作等工业基准任务上的性能权衡
• 识别了七个关键挑战与未来方向：物理 grounded 的数据基础、触觉反馈的融合与语义grounding、物理交互中的泛化与sim-to-real迁移、分层规划与反馈驱动控制、实时约束与可解释性及安全性、生成式AI在数据增强中的作用、去中心化模块化架构的韧性
• 强调触觉感知（haptic feedback）与世界模型（world models）对于工业GPI的关键补充作用，弥补纯视觉-语言模型的局限性

• 基于VLA基础模型（如RT-2、PaLM-E、Gato、OpenVLA）构建GPI系统，通过端到端架构整合感知、推理与动作生成
• 引入触觉模态融合架构，将力/力矩传感、本体感觉与视觉-语言表征结合，增强接触丰富任务的物理交互能力
• 采用世界模型进行预测性状态模拟，支持长程规划与想象-based规划（如DayDreamer、NVIDIA Cosmos）
• 提出物理信息机器学习（PIML）/物理信息神经网络（PINN）方法，将物理定律（如胡克定律）嵌入损失函数，约束动作预测符合物理规律
• 使用分层控制架构：高层VLM进行任务规划，中间层生成2D路径或视觉子目标，低层扩散策略或流匹配模型执行高频控制

• Open X-Embodiment（OXE）数据集：100万+轨迹，22种机器人形态，527项技能，60个数据集
• BridgeData V2、DROID、ARIO、RT-X数据集：大规模跨形态机器人演示数据
• 模拟环境：Isaac Sim、MuJoCo、Habitat、iGibson、SAPIEN、RLBench、VIMA-Bench、Ravens、MuBlE
• 真实世界基准：CALVIN、ALOHA、Franka-DROID机器人平台
• 模型规模：从35M（RT-1-X）到55B（RT-2 PaLI-X）参数不等，OpenVLA为7B参数

• 评估环境：RLBench模拟环境、Franka Panda真实机器人、ALOHA双臂平台
• 主要评估指标：任务成功率、循环时间（Cycle Time）、泛化分数（Generalization Score）、力曲线遵循度（Force-profile Adherence）、姿态精度、任务级周期时间
• 关键实验结果：

- RT-1在700+任务上达到97%的已见任务准确率，但对未见运动技能泛化有限

- OpenVLA在BridgeData V2和Franka-DROID上评估，成功率上限约90%，推理速率不适合1KHz实时控制

- RT-2结合网络规模视觉-语言数据与真实机器人演示，提升对未见任务和指令的泛化，但无法泛化到未见运动技能

- 消融研究表明，触觉反馈集成、世界模型预测、分层规划架构对工业接触丰富任务的性能有显著贡献