加州大学圣地亚哥分校和麻省理工学院的研究员们开发了一款开源远程操作系统,名为Open-Television。
该系统支持多种设备,能够提供实时立体视频流,用户可以通过 VR 头显隔空操控机器人。其核心理念是模拟人类双目立体视觉和活动颈部,提升操作的自然性和沉浸感。该系统采用逆运动学算法将 VR 头显的 API 映射到机器人身上,实现精确的动作传递,基于 Web 平台,随时随地可以通过浏览器访问。此外,该系统还解决了人形机器人和人体自由度不匹配的问题,并通过遥操作方式采集的数据训练机器人自主完成任务。
上图:美国波士顿的操作员可以在美国圣地亚哥(约3000英里外)操作机器人
利用Open-TeleVision系统,操作人员可以通过机器人的“眼睛”来以第一人称视角来感知环境,并能够1:1对应地操作机器人的头,手臂和手指等