一眼看懂
封面预览
论文提出了 Pre-VLA，一种统一的运行时验证架构，用于在物理执行或世界模型想象之前对候选动作块进行先发制人的有效性评估
- 论文提出了 Pre-VLA，一种统一的运行时验证架构，用于在物理执行或世界模型想象之前对候选动作块进行先发制人的有效性评估
- 核心目标解决大视觉-语言-动作（VLA）模型和生成式世界模型部署时面临的动作生成不确定性问题，防止低质量动作导致物理失败或误导性世界模型推演
- 该架构旨在通过轻量级过滤管道提升具身智能系统的安全边界，在有限的计算预算内动态拦截异常动作
Card 01
研究单位
研究单位
- 论文作者 Zhen Sun 等人标注了多个研究机构编号（如 1,4; 2,4 等），但原文截断部分未明确列出具体单位名称
Card 02
论文概述
论文概述
- 论文提出了 Pre-VLA，一种统一的运行时验证架构，用于在物理执行或世界模型想象之前对候选动作块进行先发制人的有效性评估
- 核心目标解决大视觉-语言-动作（VLA）模型和生成式世界模型部署时面临的动作生成不确定性问题，防止低质量动作导致物理失败或误导性世界模型推演
- 该架构旨在通过轻量级过滤管道提升具身智能系统的安全边界，在有限的计算预算内动态拦截异常动作
Card 03
核心贡献
核心贡献
- 提出了 Pre-VLA 统一运行时验证架构，通过超低延迟过滤管道先发制人地保障物理机器人执行器和世界模型模拟器的安全
- 设计了基于高效统一骨干网络的多模态动作验证模块，结合模态感知池化和双分支预测头，联合预测动作安全置信度和优势分数，并提出多任务训练目标缓解类别不平衡
- 在 LIBERO 机器人操作基准上进行了全面评估，证明方法显著提升了VLA闭环执行成功率，减少了环境交互步骤，并在严格的运行时计算预算下缓解了世界模型幻觉
Card 04
方法描述
方法描述
- 采用改进的 WorldVLA 统一多模态骨干网络，冻结骨干参数并提取最后一层隐藏状态作为特征基础
- 设计模态感知池化层，使用预定义掩码分离文本指令、视觉观察、本体感知状态和动作块的独立贡献，拼接后形成全局特征向量
- 使用轻量级双分支前馈网络：主分类分支输出安全置信度，并行回归分支预测连续优势分数
- 制定多任务联合优化目标，结合 Focal Loss 用于难例分类、均方误差回归损失用于物理正则化，以及自适应软阈值损失用于概率校准
- 设计双模式先发制人重采样调度器，在物理执行器和世界模型想象中分别进行动作拦截和计算过滤
Card 05
数据集与资源
数据集与资源
- 训练数据来源于 LIBERO 基准的 PPO 推演轨迹，包含 1,284,485 个动作块样本，正负样本比例约 95:5
- 训练环境为单节点 DDP 模式，使用 8× NVIDIA H20D GPU（每块约 141GB 内存），训练时长约 8 天 16 小时 43 分钟
- 推理实验使用 16× NVIDIA RTX 5090 GPU（每块 32GB 内存），VLA、Pre-VLA 和世界模型部署在独立 GPU 上
Card 06
评估与结果
评估与结果
- 评估基于 LIBERO 模拟环境和 RynnVLA-002 基线模型，涵盖四个套件：LIBERO-10、LIBERO-Goal、LIBERO-Object 和 LIBERO-Spatial
- 关闭环执行成功率从基线的平均 30.79% 提升至 37.62%（绝对增益 6.83 个百分点），同时减少了任务执行步骤
- 离线测试集上达到 F1 分数 0.8303 和 准确率 0.9542，无效动作误通过率仅 0.0200
- 平均单步验证时间为 183.9 ms，表明计算开销可控
- 世界模型推演分析显示方法有效抑制了错误累积，保持了场景结构和对象空间关系的稳定性