加州大学圣地亚哥分校和麻省理工学院的研究员们开发了一款开源远程操作系统,名为Open-Television。
该系统支持多种设备,能够提供实时立体视频流,用户可以通过 VR 头显隔空操控机器人。其核心理念是模拟人类双目立体视觉和活动颈部,提升操作的自然性和沉浸感。该系统采用逆运动学算法将 VR 头显的 API 映射到机器人身上,实现精确的动作传递,基于 Web 平台,随时随地可以通过浏览器访问。此外,该系统还解决了人形机器人和人体自由度不匹配的问题,并通过遥操作方式采集的数据训练机器人自主完成任务。
上图:美国波士顿的操作员可以在美国圣地亚哥(约3000英里外)操作机器人
利用Open-TeleVision系统,操作人员可以通过机器人的“眼睛”来以第一人称视角来感知环境,并能够1:1对应地操作机器人的头,手臂和手指等。
不需要在手臂和手指佩戴传感器,团队采用了类似于Kinect系统的远程传感器来捕获用户四肢的运动。利用这种方式,机器人可以1:1地模拟人类操作员的动作,并执行诸如捡球并把球放进杯子里的活动等。
加州大学圣地亚哥分校Open-TeleVision
该研究的详细内容已经发表在期刊上。(下滑阅读全文)
更多产品信息:http://www.jingtianrobots.com/index.php?id=1167
项目地址:https://robot-tv.github.io/
获取产品报价:https://item.jd.com/10111925878794.html