物体抓取位姿估計算法綜述_阅读笔记:李飞飞团队的2019CVPR的物体6D位姿估计论文...

该博客综述了一篇2019年CVPR论文,研究物体6D位姿估计算法。创新点包括RGB-点云像素嵌套融合、端对端迭代姿态提取和神经网络内的一体化精确程序。实验通过机器人的抓取验证了算法的实用性和鲁棒性,即使面对遮挡和环境噪声也能保持高识别率。通过迭代细化,随着次数增加,识别精度提升。
摘要由CSDN通过智能技术生成

1、物体6D位姿:

旋转坐标3个

平移坐标3个

2、论文的创新点:

(1)将RGB值和点云图逐像素进行嵌套融合——提高系统鲁棒性;

(2) 提出在端对端的学习框架中进行迭代提取姿态的方法;——提高实时速度;

(3)在神经网络结构框架中将迭代精确提出程序进行一体化;——移除对ICP步骤后处理的以前方法的依赖;

2095e191ee0891cfeb908438d8174121.png

3、论文的实验(方法+对象):

利用机器人的抓取来验证算法设计的实用性。

(1)将分割的深度像素转换为3D点云,然后使用PointNet-like结构提取特征,彩色图片嵌入,实现3D点云特征与图像特征相匹配;

(2)将3D点云特征与图像特征相融合,方法就是利用局部像素融合,可以避免遮挡和环境噪声的影响;

(3)确定物体6D位姿,利用损失函数,对于不对称和对称物体使用不同的损失函数,然后对预测结果进行优化,引入像素置信度,最终的估计结果是具有最高像素置信度的那个判断;

(4)利用神经网络进行迭代细化提取,训练神经网络,将原来预测的位姿作为估计的原始框架,将输入的点云图转化为这个估计的原始框架,输入网络,并且基于原来估计的位姿预测位姿残差,不断迭代循环生成更好的预测结果。但是一定要使主网络收敛后再训练,否则不能进行有效的学习。

4、论文的实验结果:

(1)物体准确分割是实现准确抓取的前提,通过比较可以看出论文的方法对于物体分割更加准确。

c437e0e7e43a35aade4a62c06c6f8dcb.png

(2)对物体进行遮挡性试验,即使遮挡面积很大,识别效率仍很高;

944e50ad8d48b06a2c03ecc78fd809a5.png

(3)迭代细化处理,迭代次数越高,识别准确度越高;

f2de3b533cf8de21c8c57b22c64444d0.png

(4)算法设计的鲁棒性验证:

随意摆放桌子上的5个物品,让机器人进行抓取。

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值