包裹点云位姿估计_【泡泡点云时空】基于点云监督学习的6D目标位姿回归

该研究提出了一种直接使用点云进行6D目标位姿估计的深度学习框架,通过深度和语义信息生成点云,采用下采样、轴角表示和迭代最近点算法进行位姿回归和微调。在YCB-video数据集上,这种方法优于基于色彩信息的方法,证明了深度信息在位姿估计中的优势。
摘要由CSDN通过智能技术生成

相比色彩信息, 深度信息更易于进行物体的位姿估计;

提出了第一个直接使用无序点集作为输入的位姿估计深度学习框架;

提出的方法在 YCB-video 数据集上超越了最新方法;

旋转表示、模型设计、损失函数等的模型简化实验。

旋转表示、模型设计、损失函数等的模型简化实验。

方法概述

预测步骤:

0. 使用深度和语义信息生成物体的点云,其中深度和语义信息由现成的方法提供

1. 对物体点云分割进行下采样(Farthest Point Sampling)

2. 以下采样的点云和分类信为输入,两个 Basenet 神经网络分别回归物体的旋转和平移。物体的平移由三维欧几里德坐标系表示;物体的旋转由围绕三个坐标轴旋转的角度(即轴角 axis-angle)表示。

3. 最后应用迭代最近点(ICP)算法对目标位姿进行微调。

如Table 1所示,仅使用深度信息,本文提出的方法在 YCB-Video 数据集上得到了比 PoseCNN (PC)和 DenseFusion (DF)这些基于色彩信息的方法更好的性能。这里 AD 表示一系列评估点的平均距离,ADS 表示对称的平均距离。

定性分析结果和与 PoseCNN (PC)、 DenseFusion (DF)的对比:

Abstract

This paper addresses the task of estimating the 6 degrees of freedom pose of a known 3D object from depth information represented by a point cloud. Deep features learned by convolutional neural networks from color information have been the dominant features to be used for inferring object poses, while depth information receives much less attention. However, depth information contains rich geometric information of the object shape, which is important for inferring the object pose. We use depth information represented by point clouds as the input to both deep networks and geometry-based pose refinement and use separate networks for rotation and translation regression. We argue that the axis-angle representation is a suitable rotation representation for deep learning, and use a geodesic loss function for rotation regression. Ablation studies show that these design choices outperform alternatives such as the quaternion representation and L2 loss, or regressing translation and rotation with the same network. Our simple yet effective approach clearly outperforms state-of-the-art methods on the YCB-video dataset.

泡泡机器人SLAM的原创内容均由泡泡机器人的成员花费大量心血制作而成,希望大家珍惜我们的劳动成果,转载请务必注明出自【泡泡机器人SLAM】微信公众号,否则侵权必究!同时,我们也欢迎各位转载到自己的朋友圈,让更多的人能进入到SLAM这个领域中,让我们共同为推进中国的SLAM事业而努力!

泡泡机器人SLAM的原创内容均由泡泡机器人的成员花费大量心血制作而成,希望大家珍惜我们的劳动成果,转载请务必注明出自【泡泡机器人SLAM】微信公众号,否则侵权必究!同时,我们也欢迎各位转载到自己的朋友圈,让更多的人能进入到SLAM这个领域中,让我们共同为推进中国的SLAM事业而努力!

商业合作及转载请联系liufuqiang_robot@hotmail.com

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值