该研究调查了是否可以使用视觉-语言-动作(VLA)模型的内部激活作为监控其执行的可靠信息源,以解决对轻量级运行时监控解决方案的需求。
提出的方法涉及在演示中获取策略激活并训练线性探针以估计进度。这些探针随后识别偏离预期进度的执行,标记潜在问题。
作者报告称,该方法在模拟和现实世界操作任务中表现得与或优于基于VLM的监控和其他需要故障数据进行训练的方法,使用开源VLA π₀.₅。
科研简讯 / 预印本
本研究探索利用VLA模型的内部激活来监控其执行,旨在减少现有方法的复杂性和运行时监控的成本。
该研究调查了是否可以使用视觉-语言-动作(VLA)模型的内部激活作为监控其执行的可靠信息源,以解决对轻量级运行时监控解决方案的需求。
提出的方法涉及在演示中获取策略激活并训练线性探针以估计进度。这些探针随后识别偏离预期进度的执行,标记潜在问题。
作者报告称,该方法在模拟和现实世界操作任务中表现得与或优于基于VLM的监控和其他需要故障数据进行训练的方法,使用开源VLA π₀.₅。
本文依据公开预印本摘要整理,未对研究结果进行独立复现。实验方法、评估范围与限制请以原文为准。自动整理可能存在误差,阅读时请核对原始资料。