一眼看懂
封面预览
论文是一篇综述，系统性地探讨了将基础模型部署到边缘具身智能系统时所面临的系统性约束与挑战。
- 论文是一篇综述，系统性地探讨了将基础模型部署到边缘具身智能系统时所面临的系统性约束与挑战。
- 核心观点是：边缘部署问题本质上是系统问题，而不仅仅是模型压缩问题，需要跨内存、调度、通信和模型架构进行协同设计。
- 论文提出了“Deployment Gauntlet”（部署险境）分类法，归纳了决定基础模型能否在边缘可靠运行的八大相互关联的系统障碍。
Card 01
研究单位
研究单位
- University of South Florida
- Florida International University
- Johns Hopkins University
- Nottingham Trent University
- Imperial College London
Card 02
论文概述
论文概述
- 论文是一篇综述，系统性地探讨了将基础模型部署到边缘具身智能系统时所面临的系统性约束与挑战。
- 核心观点是：边缘部署问题本质上是系统问题，而不仅仅是模型压缩问题，需要跨内存、调度、通信和模型架构进行协同设计。
- 论文提出了“Deployment Gauntlet”（部署险境）分类法，归纳了决定基础模型能否在边缘可靠运行的八大相互关联的系统障碍。
Card 03
核心贡献
核心贡献
- 提出了“Deployment Gauntlet”分类框架，系统性地梳理了边缘具身智能部署中的八大系统性障碍。
- 分析并对比了不同边缘工作负载（如VLA策略、扩散策略、视觉编码器等）的主导执行瓶颈与失效模式。
- 总结了跨越传感、计算、内存、能耗与安全等层面的缓解策略与技术方向，为未来的系统级协同设计提供了路线图。
Card 04
方法描述
方法描述
- 采用系统性文献综述的方法，构建并阐述“Deployment Gauntlet”这一核心分类学。
- 创新性地从系统视角而非仅模型视角，分析了视觉-语言-动作策略、扩散策略、多模态融合栈等典型工作负载在边缘设备上的瓶颈。
- 通过构建障碍与缓解策略的映射关系，强调了跨层协同设计（模型、编译器、硬件、运行时）的必要性。
Card 05
数据集与资源
数据集与资源
- 作为一篇综述论文，未使用特定数据集进行训练或验证实验。
- 重点分析了代表性模型与硬件平台，例如 NVIDIA Jetson AGX Orin、Qualcomm RB5、Apple M-series 等边缘SoC。
- 讨论了多种基础模型工作负载，包括 RT-2、OpenVLA、Octo、LLaVA-Mini 等模型在边缘执行的特征。
Card 06
评估与结果
评估与结果
- 评估基准是“Deployment Gauntlet”框架下定义的八大系统障碍（如传感器融合税、异构计算失配、统一内存瓶颈等）。
- 主要结论指出：对于自回归VLA策略，主要瓶颈是内存带宽；对于扩散策略，主要瓶颈是计算延迟和持续能耗。
- 论证了可靠的部署依赖于将快速控制回路与慢速语义推理解耦，并执行跨内存、调度、通信和模型架构的系统级协同设计。