研究问题在于通用AI模型是否能在没有任务特定训练或演示的情况下,比视觉-语言-动作模型(VLAs)和世界-动作模型(WAMs)等专用策略更可靠地控制机器人操作。

作者提出了自主操作策略(AMPs),其中通用AI模型直接指挥操作器,并根据任务进展动态调整其动作。他们介绍了AMP1,这是一种适用于单臂、双臂和移动操作等多种操作任务的通用系统。

作者报告称,AMP1在无需任何演示或任务特定训练的情况下,在RoboLab-120和CaP-Gym基准测试中取得了最佳结果。在现实世界测试中,AMP1在涉及十二个任务和三种机器人的108次试验中成功了104次,显著降低了与VLAs和WAMs相比的失败率。带有记忆组件的增强版AMP1在双臂操作任务上的表现进一步提升。