该研究旨在通过开发名为 LIBERO-PeRM 的基准来解决个性化机器人操作(PeRM)领域的空白。它探讨了策略在各种场景中如何遵循偏好,包括零样本设置、从演示中学习以及跨不同布局和任务的泛化。
作者提出了一种在模拟中定义可观察偏好的受控框架,涵盖运动、技能和个人资料选择。他们使用程序化流水线生成带有和不带偏好的配对演示,创建了一个包含高质量演示和偏好指标的数据集。
作者进行的实验表明,现有的价值学习算法(VLA)在零样本个性化方面面临挑战,而监督微调(SFT)可以实现偏好学习。混合训练方法在使用上下文提示时表现更好,但可能会影响运动偏好学习。偏好泛化、分解和冲突处理仍然是需要进一步发展的领域。