稚晖君后宇树也来玩开源了:机器人操作数据集,采用抱抱脸LeRobot训练测试,网友:泰裤辣!...

西风 发自 凹非寺
量子位 | 公众号 QbitAI

继稚晖君之后,国内又一家头部机器人公司玩起了开源!

宇树科技,开源Unitree G1机器人操作数据集,包括数据采集、学习算法、数据集和模型,并表示将持续更新。

e79f6dd58ef26fb9cb0b54cc0d6507b7.png

更令网友意外的是,宇树基于抱抱脸LeRobot开源框架训练并测试。

c66a7d2ce58a51860a4b2ed350d4e423.png

抱抱脸联合创始人兼CEO紧忙码住转发:

泰裤辣,LeRobot、huggingface和开源技术在机器人领域日益突出。

b794dc3de1c8e2501fc8b5c4fee2055e.png

此套开源数据集目前包括拧瓶盖倒水:

6fdaf0142448d23d503174279ea75ff9.gif

叠三色积木等5种操作:

299337c45966e4406c1d259972315611.gif

网友对于宇树这波开源纷纷竖起了大拇哥:

好哇好哇,希望更多公司能为机器人研究开源数据集。

231bfe1002d1af083aa82a7d441ba164.png

具体都开源了啥?

具体来看,数据采集方面,目前使用苹果Vision Pro对G1进行遥操作控制的仓库,已超400star:

6a3fc61141959fcbfe8685d1eccac383.png

其中包含遥操作控制的代码教程:

6a689a00e17a88586999b17349e4185c.png

以及硬件配置图、物料清单和安装说明:

3f9a32affc04592f213b415dc14b6d9e.png
62e5cac10dc991163aab192e37d511b9.gif

训练方法如前所述,基于lerobot:

7ede9d2b5231cb38b58a66cefd8452ba.png

还有将前面遥操作采集的JSON格式数据转为lerobot所需格式的教程。

最后就是数据集和模型,目前模型还显示“尚未公开”,数据集使用配备有三指灵巧手的宇树G1人形机器人收集,每张图分辨率为640x480,每个手臂和灵巧手的状态和动作维度为7。

包含五大操作数据集:

1fb50d9f82fcc5347093ddc73231cc38.png

除了开头所展示的拧瓶盖倒水、堆叠红、黄、绿三色木块,还有将摄像头放入相应包装盒、收集物品并存储、双臂抓取红色木块并将其放入一个黑色长方形容器中:

f30913a96cde5417017af6497ef47f6a.gif
0201e7b4b3fa6a6381f8a5088361b5ca.gif

宇树G1 9.9万元起,已量产

最后再来简单介绍一下宇树G1,量子位此前也有持续关注。

今年5月份首次亮相,当时官方首先展示的就是它的手部以及操作能力。

也是采用3指力控灵巧手,通过力位混合控制,能拧瓶盖、砸核桃,还能做焊接。

4305bd0199809cd14ee6106044f81ffb.gif

在视觉传感器方面,搭载了Intel RealSense D435和LIVOX-MID360 3D激光雷达,能够实现360°的探测感知。

be8c24a2c0d78feb0de74b664ae4e59a.jpeg

8月份,宇树更是宣布G1可大规模量产了。

基于端到端深度强化学习和仿真训练的技术路线,G1可快速升级迭代。

G1量产版性能更强,能单腿跳跃:

9523cb9e8042d77f1249d8aeb072569e.gif

还能原地起跳360度转身:

3bfdfcde344f842b0e4d66ce48bf1420.gif

而且发售价9.9万起,让一众同行坐不住。

如今伴随G1数据集开源,距离让机器人替我上班是不是又前进了一丢丢。

ae978ba98af0ef37fa75b861598e3e5e.png

参考链接:
[1]https://x.com/unitreerobotics/status/1856273635461488867?s=46
[2]https://github.com/unitreerobotics/avp_teleoperate/blob/g1/README_zh-CN.md
[3]https://huggingface.co/unitreerobotics
[4]https://github.com/unitreerobotics/unitree_IL_lerobot

报名即将截止!

「2024人工智能年度评选」

量子位2024人工智能年度评选将于11月15日截止报名,评选从企业人物产品三大维度设立了5类奖项。

欢迎扫码报名评选!评选结果将于12月MEET2025智能未来大会公布,期待与数百万从业者共同见证荣誉时刻。

b1faf794109f027ed0a4d5c3de8a1ad4.png

点这里👇关注我,记得标星哦~

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值