研究问题集中在机器人策略的运行时故障监控器的有效性上,特别是监控器报警是否能及时且必要地进行干预。
RESCUE 提出了一种反事实评估方法,通过恢复模拟器和策略的状态到执行检查点,比较不同的操作,并确定响应报警是否能减少任务完成的预期成本。
作者报告使用 OpenVLA-OFT 和 π₀.₅ 在 LIBERO-Spatial 和 LIBERO-Plus 数据集上的评估结果,涉及 128,340 个反事实分支。他们发现可恢复性取决于状态和干预措施,而有利的检测分数并不总是与较低的干预成本相关。
科研简讯 / 预印本
RESCUE 是一种反事实框架,用于评估运行时监控器的报警是否能启用有用的干预。
研究问题集中在机器人策略的运行时故障监控器的有效性上,特别是监控器报警是否能及时且必要地进行干预。
RESCUE 提出了一种反事实评估方法,通过恢复模拟器和策略的状态到执行检查点,比较不同的操作,并确定响应报警是否能减少任务完成的预期成本。
作者报告使用 OpenVLA-OFT 和 π₀.₅ 在 LIBERO-Spatial 和 LIBERO-Plus 数据集上的评估结果,涉及 128,340 个反事实分支。他们发现可恢复性取决于状态和干预措施,而有利的检测分数并不总是与较低的干预成本相关。
本文依据公开预印本摘要整理,未对研究结果进行独立复现。实验方法、评估范围与限制请以原文为准。自动整理可能存在误差,阅读时请核对原始资料。