研究旨在开发一种方法,使机器人能够从人类演示中学习环境感知的全身操作策略,尽管存在身体差异和运动学差异。
作者提出了 Pixel-UMI,包括环境感知重定向(EAR)来确定机器人姿态并生成碰撞感知目标,延迟校准动作分配将轨迹转换为动作,以及重定向误差感知掩码(REAM)来处理视角不匹配。他们还使用 DAgger 收集人类修正以提高性能。
作者在五个具有挑战性的任务上评估了 Pixel-UMI,包括连杆物体操作和接触丰富的双臂协调,平均任务进度达到 87.0%。
科研简讯 / 预印本
Pixel-UMI 是一个从传感器化人类演示学习环境感知全身策略的管道,解决身体差异和运动学差异带来的挑战。
研究旨在开发一种方法,使机器人能够从人类演示中学习环境感知的全身操作策略,尽管存在身体差异和运动学差异。
作者提出了 Pixel-UMI,包括环境感知重定向(EAR)来确定机器人姿态并生成碰撞感知目标,延迟校准动作分配将轨迹转换为动作,以及重定向误差感知掩码(REAM)来处理视角不匹配。他们还使用 DAgger 收集人类修正以提高性能。
作者在五个具有挑战性的任务上评估了 Pixel-UMI,包括连杆物体操作和接触丰富的双臂协调,平均任务进度达到 87.0%。
本文依据公开预印本摘要整理,未对研究结果进行独立复现。实验方法、评估范围与限制请以原文为准。自动整理可能存在误差,阅读时请核对原始资料。