"TieBot:机器人如何通过视觉演示学习打领带"
摘要
本文介绍了一种名为TieBot的创新系统,该系统通过视觉演示学习如何打领带,采用了一种从真实到模拟再到真实的(Real-to-Sim-to-Real)学习框架。TieBot通过层次特征匹配方法从演示视频中估计领带的网格序列,并利用这些估计的网格作为子目标,通过教师-学生训练范式学习从点云观察中抓取和放置领带的位置。最后,该系统在实际应用中学习残差策略,以弥合模拟与真实世界之间的差距。实验证明,TieBot在模拟和真实环境中均有效,双臂机器人在10次试验中成功打领带的成功率达到50%。
Read more...








