The Price Is Not Right: Neuro-Symbolic Methods Outperform VLAs on Structured Long-Horizon Manipulation Tasks with Significantly Lower Energy Consumption

• Human-Robot Interaction Lab, Tufts University, Medford, MA, USA
• AIT Austrian Institute of Technology GmbH, Center for Vision, Automation & Control, Vienna, Austria

• 在结构化、长视野的操作任务上，对微调的开源视觉-语言-动作模型与神经符号架构进行全面的经验比较。
• 评估两种方法在解决结构化的“汉诺塔”任务中的任务性能和能耗，并测试其泛化能力。
• 核心问题是评估在结构化长视野操作任务中，直接微调大规模端到端基础模型是否比采用结合显式符号推理的架构更有效、更高效。

• 在结构化长视野操作任务（3块汉诺塔）上，神经符号模型的成功率显著高于VLA模型（95% vs. 34%）。
• 神经符号模型在能耗方面表现极佳，其训练能耗比VLA微调低近两个数量级，且推理过程无需GPU。
• 神经符号模型展现出强大的泛化能力，在没有训练过的4块汉诺塔任务上达到78%的成功率，而两种VLA模型均完全失败。
• 提供了一个基于汉诺塔的基准任务和一个系统性的比较框架，用于分析不同架构在性能和效率上的权衡。
• 强调了对于具有明确程序约束的任务，显式结合符号结构在可靠性、数据效率和能源效率方面的优势。

• 比较对象1：VLA模型。基于开源的 π₀ 模型，使用LoRA在自定义数据集上进行微调。评估了两种变体：端到端VLA（接收单一高级指令）和规划引导VLA（接收分解的子任务指令）。
• 比较对象2：神经符号模型。借鉴先前工作，结合了基于PDDL的符号规划器和基于扩散模型的低级控制策略。它从演示中同时学习符号抽象域和底层神经策略。
• 关键技术：神经符号模型的核心创新在于其分层架构。首先通过ASP求解器从少量演示中推断符号规划域，然后为每个符号算子训练一个扩散模仿学习策略来执行，实现了结构化的长视野规划与连续控制的结合。

• 训练数据集：在 Robosuite 仿真环境中构建的自定义汉诺塔任务数据集。VLA使用300个全任务轨迹演示，神经符号模型仅使用50个堆叠任务演示。
• 模型规模：VLA模型使用PaliGemma 2B作为视觉语言主干，Gemma 300M作为动作头。神经符号模型的规划器与策略网络规模较小。
• 训练资源：所有实验（训练、微调、评估）均在一张 NVIDIA GeForce RTX 4090 (24GB) 上完成。使用Weights & Biases和RAPL日志监测GPU/CPU功耗和能耗。

• 评估环境：在 Robosuite 仿真中进行的结构化汉诺塔任务（单步移动、3块、4块）。
• 主要指标：任务成功率、任务推进率、总能耗（GPU+CPU）、单次执行时长。
• 关键结果：

- 任务性能：在3块任务上，NSM成功率95%，E2E-VLA34%，PG-VLA0%。在4块任务上，NSM成功率78%，两种VLA均为0%。

- 训练能耗：VLA微调总能耗约65-68 MJ，NSM训练仅需0.85 MJ，相差近两个数量级。

- 推理能耗：VLA需要GPU推理，单次任务总功耗~115W；NSM仅需CPU，功耗~19W。在多数任务上，VLA的单次执行能耗是NSM的一个数量级以上。

- VLM规划器评估：除了GPT-5（84%最优），评估的Qwen和PaliGemma VLM均无法生成有效规划。