研究问题在于如何仅使用单目立体相机而不是多个摄像头(包括腕部摄像头)来实现精确的双臂操作,以减少复杂性和成本。

提出的方法是 EyeRobot 2.0 通过调整两个视角主动聚焦场景中的3D点,对图像中心区域进行更集中的处理,并使用强化学习协调凝视和选择目标。

作者报告称,EyeRobot 2.0 在真实世界和模拟数据中与被动立体相机和带有腕部摄像头的策略进行了比较。EyeRobot 2.0 的性能优于被动立体相机,并在各种情况下与或超过带有腕部摄像头的策略。