论文复现5:UMI Universal Manipulation Interface

“Universal Manipulation Interface: In-The-Wild Robot Teaching Without In-The-Wild Robots” (Chi et al., 2024, p. 1) (pdf) 通用操控接口:无需野外机器人即可进行野外机器人教学

摘要:
我们提出了通用操作接口(UMI)——一种数据收集和策略学习框架,允许将技能从野外人类演示直接转移到可部署的机器人策略。 UMI 采用手持式夹具,加上精心的界面设计,可实现便携式、低成本和信息丰富的数据收集,以进行具有挑战性的双手和动态操作演示。为了促进可部署的策略学习,UMI 结合了精心设计的策略接口、推理时间延迟匹配和相对轨迹动作表示。由此产生的学习策略与硬件无关,并且可跨多个机器人平台部署。配备这些功能后,UMI 框架解锁了新的机器人操作功能,只需更改每个任务的训练数据,即可实现零样本可推广的动态、双手、精确和长视野行为。我们通过全面的现实世界实验展示了 UMI 的多功能性和有效性,其中通过 UMI Zeroshot 学习的策略在对不同的人类演示进行训练时可以推广到新的环境和对象。 UMI 的硬件和软件系统在 https://umi-gripper.github.io 上开源。

论文:https://arxiv.org/pdf/2402.10329
项目主页:https://umi-gripper.github.io/
算法code:https://github.com/real-stanford/universal_manipulation_interface
硬件指引:https://docs.google.com/document/d/1TPYwV9sNVPAi0ZlAupDMkXZ4CA1hsZx7YDMSmcEy6EU/edit#heading=h.5k5vwx2iqjqg
数据采集介绍:https://

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值