点击下方卡片,关注“CVer”公众号
AI/CV重磅干货,第一时间送达
添加微信号:CVer2233,小助手会拉你进群!
扫描下方二维码,加入CVer学术星球!可以获得最新顶会/顶刊上的论文idea和CV从入门到精通资料,及最前沿应用!发论文/搞科研/涨薪,强烈推荐!
一水 发自 凹非寺
转载自:量子位(QbitAI)
马斯克亲自站台,2000多万网友热闹围观Optimus新灵巧手整活——
只见网球被人用力抛出后,新灵巧手毫不费力地就接住了,举手投足间散发出一种“小菜一碟”的感jio。
以上,来自Optimus灵巧手最新升级。
据Optimus副总裁Milan Kovac透露:
相比上一代,新灵巧手自由度翻倍,手部有22个自由度,手腕/前臂有3个。
看完最新效果,微软前战略顾问Robert Scoble立马写了篇小作文:
(机器人)低延迟远程操作工程被忽视和误解……
想象自己在外出差,以后只要戴上手套和一副眼镜,就能像回到家一样,和孩子出去玩接球。
我在其他机器人公司看到过远程操作的努力,这是我迄今为止见过的最好的。
逼近人类手部自由度
实际上,早在月初的特斯拉“We Robot”发布会上,这款灵巧手就曾短暂亮相。
当时长下面这样,或许由于是放大版,看起来有点不太灵活的样子。(doge)
现在,时隔不到1个月,这款手终于被安在了Optimus身上。
Optimus副总裁Milan Kovac也在第一时间详细透露了灵巧手的信息:
我们的新手/前臂,自由度翻倍,现在已在机器人上投入使用!手部有22个自由度,手腕/前臂有3个。
这个短视频是昨晚在实验室(远程操控)制作的,是实时的。这让我们有信心,我们很快就能用这些新机器人制作所有新的机器人。
好家伙!居然是远程操控的,不过看上去延迟已经很低了。
除此之外,他还重点提到了后面的更多计划。
年底前还有一些工作要做,特别是在扩展触觉传感集成(比之前的双手覆盖面积更大)、通过肌腱进行非常精细的控制以及减轻前臂重量方面。所有驱动装置都已移至前臂,这增加了其重量。
有趣的挑战在于,手指和手掌需要有足够的柔软性和适应性,同时还要有一层保护层,而不会过多地影响触觉感知。
祝贺所有硬件和固件团队取得这一里程碑,祝大家感恩节快乐!
那么问题来了,我们知道灵巧手自由度越高,灵活性越好,那自由度翻倍究竟在效果上有多大差别呢?
别急,我们这就找来Optimus具备11个自由度(一二代Optimus都是配备了11个自由度)的效果。
正常速度下,它分拣电池(特斯拉的4680电池)是这样的:
从今年5月的视频可以看出,Optimus手部操作给人的机械感还很明显。
而这,已经是当时英伟达科学家Jim Fan眼中最好的灵巧手。
Optimus的手是全球五指机器人里最灵巧的之一。
它的手不仅有触觉感应,自由度(DoF)也达到了11个,而同行基本上都只有5-6个自由度。
经过几个月的进化,虽然国内外厂商都在狂卷机器人灵巧手,但仅从自由度来看,Optimus灵巧手依然保持着领先地位。
由OpenAI投资的初创企业1X,9月初推出的家庭人形机器人手部具有20个自由度;
Figure 8月发布的第二代人形机器人Figure02,搭载了第四代机械手,拥有16个自由度;
国内智元机器人8月发布的新产品中,灵巧手的自由度达到19个;
傅利叶9月发布通用人形机器人GR-2,灵巧手自由度达到12个;
……
一番看下来,已具备22个自由度的Optimus灵巧手已经相当接近人类了。(人类的手通常被认为具有27个自由度)
而这,或许也让Optimus和Neuralink(马斯克旗下脑机接口公司)的合作更接近实现。
用Neurlaink植入物控制机械手或腿
早在今年7月,马斯克谈到了通过Neurlaink的植入物来控制机器人手臂或腿。
假设有人失去了手臂或腿,我们实际上可以将Optimus手臂或Optimus腿连接到Neuralink植入物上。
这样来自你大脑的神经命令原本会流向我们的生物手臂,现在会流向你的机器人手臂或腿,你基本上就会拥有网络超级能力。
而就在最近,Neurlaink想用植入物控制机械臂的可行性试验成功获批。
一旦研究成功,这意味着今后假肢制造商都可以用Neurlaink来控制手臂,从而改变人们的生活。
所以说,有了更灵活机械手的Optimus,可以预见能在该领域大有所为。
也难怪大boss马斯克会在第一时间赶去团队底下祝贺。
参考链接:
[1]https://x.com/_milankovac_/status/1862167219649818816
[2]https://x.com/Scobleizer/status/1862152316889211220
[3]https://x.com/Tesla_Optimus/status/1862116407594377698
[4]https://www.teslarati.com/tesla-optimus-neuralink-collaboration/
何恺明在MIT授课的课件PPT下载
在CVer公众号后台回复:何恺明,即可下载本课程的所有566页课件PPT!赶紧学起来!
ECCV 2024 论文和代码下载
在CVer公众号后台回复:ECCV2024,即可下载ECCV 2024论文和代码开源的论文合集
CVPR 2024 论文和代码下载
在CVer公众号后台回复:CVPR2024,即可下载CVPR 2024论文和代码开源的论文合集
Mamba、多模态和扩散模型交流群成立
扫描下方二维码,或者添加微信号:CVer2233,即可添加CVer小助手微信,便可申请加入CVer-Mamba、多模态学习或者扩散模型微信交流群。另外其他垂直方向已涵盖:目标检测、图像分割、目标跟踪、人脸检测&识别、OCR、姿态估计、超分辨率、SLAM、医疗影像、Re-ID、GAN、NAS、深度估计、自动驾驶、强化学习、车道线检测、模型剪枝&压缩、去噪、去雾、去雨、风格迁移、遥感图像、行为识别、视频理解、图像融合、图像检索、论文投稿&交流、PyTorch、TensorFlow和Transformer、NeRF、3DGS、Mamba等。
一定要备注:研究方向+地点+学校/公司+昵称(如Mamba、多模态学习或者扩散模型+上海+上交+卡卡),根据格式备注,可更快被通过且邀请进群
▲扫码或加微信号: CVer2233,进交流群
CVer计算机视觉(知识星球)来了!想要了解最新最快最好的CV/DL/AI论文速递、优质实战项目、AI行业前沿、从入门到精通学习教程等资料,欢迎扫描下方二维码,加入CVer计算机视觉(知识星球),已汇集上万人!
▲扫码加入星球学习
▲点击上方卡片,关注CVer公众号
整理不易,请赞和在看