研究问题集中在克服大规模强化学习(RL)在执行复杂任务时的探索挑战,传统方法依赖于特定任务的工程结构,如成形奖励和演示。

作者提出了一种自适应采样方法——成功导向采样(SGS),旨在将RL训练集中在当前策略能力前沿附近的任务配置上,从而最大化利用并行模拟中的学习经验。

评估涉及多达一百万个并行环境的实验,结果显示SGS有助于RL解决多地形四足运动和复杂装配等挑战性任务,而这些任务之前的方法无法解决。此外,学习到的策略被转移到真实硬件上进行零样本装配任务。