机器人学中的状态估计pdf_用于3D人体姿势估计的新数据集

本文介绍了用于三维人体姿态估计的三个重要数据集:DensePose、SURREAL和UP-3D。这些数据集为解决计算机视觉中的密集对应、深度和3D人体模型提供了丰富资源,推动了三维人体姿态估计的研究进展。每个数据集的特点、规模以及获取的详细信息进行了概述。
摘要由CSDN通过智能技术生成
3df9fa1c89289a0d8448811f8f830d4a.png

计算机在图像和视频中识别和理解人类的能力对于包括自动驾驶、动作识别、人机交互、增强现实和机器人视觉在内的多项任务至关重要。人体姿态估计是计算机视觉中的基本问题。近年来,在二维人体姿态估计方面取得了重大进展。这一成功背后的关键因素是可用的大规模注释人体姿态数据集,允许训练网络的二维人体姿态估计。与此同时,在三维人体姿态估计方面的进展仍然有限,因为获得关于密集对应、深度、运动、身体部分分割、遮挡的地面真实信息是一项非常具有挑战性的任务。在本文中,我们列出了几个最近创建的数据集,试图解决用于三维人体姿态估计的带注释数据集的不足。

61ddcdb910552bb29626bb95a8717ea1.png

1、DensePose

33d184bd6578e865a388bae0cc7b2ff9.png

DensePose是一个大规模的地面数据集,具有在50K COCO图像上手动注释的图像与表面的对应关系。为了构建此数据集,Facebook AI研究团队邀请了专门人员从2D图像到基于人体的表面表示的密集对应关系。

10e7102546c5ecd69bcac533d064b1a3.png

以下是来自验证集的图像注释的可视化效果:

4c50fa821561c96141959caff44aec8a.png

详情地址:

http://densepose.org/

pdf地址:

https://arxiv.org/pdf/1802.00434.pdf

2、SURREAL

6f0473410ca4c6af1477202d4fdda22a.png

SURREAL是一个新的大规模数据集,具有从人类运动捕捉数据的3D序列渲染的人的合成生成但逼真的图像。它包括超过600万帧以及地面人体真实姿势,深度图和分割蒙版。

cd13523f6470aae1f8b4778d62f96b37.png

详情地址:

https://www.di.ens.fr/willow/research/surreal/

pdf地址:

https://arxiv.org/pdf/1701.01370.pdf

3、UP-3D

d89fe855bc29ccacfb4cb3c9164b8b82.png

UP-3D是一个数据集,用于将多个任务的不同数据集“联合起来”。尤其是使用最近引入的SMPLify方法,研究人员可以获得适合多个人体姿态数据集的高质量3D人体模型。该数据集结合了两个LSP数据集(11,000个训练图像和1,000个测试图像)和MPII-HumanPose数据集的单人部分(13,030个训练图像和2622个测试图像)。尽管可以使用自动分割方法来提供前景轮廓,但研究人员决定使用人工注释器来提高可靠性。

4bc7568c59e166cbe6a169c7475f8870.png

经过验证的拟合形成了带有5569个训练图像和1208个测试图像的初始UP-3D数据集。经过对语义身体部位分割,姿势估计和3D拟合的实验,改进后的3D拟合可以扩展初始数据集。

ef3ab484223d289e8b757aa5ba0a6a96.png

详情地址:

http://files.is.tuebingen.mpg.de/classner/up/

pdf地址:

https://arxiv.org/pdf/1701.02468.pdf

未经作者授权请勿进行转载搬运~

576feaeb11ef7034b128fd3c9edcbd7f.png
作者:Timothy D. Barfoot ,最2018高清资源,完整395页,持续更。 版权归作者所有,任何形式转载请联系作者。 State Estimation for Robotics早已在SLAM领域广为流传,几乎是SLAM入门必读的经典书籍之一。本书深入讲解了状态估计的机理、三维几何学基础、矩阵李群以及位姿和点的估计方法等,尤其对基于滤波器的状态估计方法的介绍全面深刻。现在在高翔、颜沁睿、刘富强等十多位SLAM专家、爱好者的共同努力下,文译本《机器人学状态估计》也终于得以面世。这对于国内广大SLAM爱好者来说,可谓一大福音,值得隆重推荐。 ——浙江大学教授,CAD & CG国家重点实验室计算机视觉团队带头人,章国锋 State Estimation for Robotics是加拿大多伦多大学Barfoot教授的名著,也是机器人方向的经典教材之一。该书侧重数学基础,先花了三分之二的篇幅来介绍概率、几何方面的基础知识,最后又回到应用问题,详细介绍了基于点云和图像的姿态估计。 这是一本难得的既注重基础又顾及前沿研究问题的教材。书的译者是一群对机器人技术富有激情的年轻人,他们的许多人在计算机视觉、机器人等科研领域开始崭露头角。这本译作倾注了他们的满腔热忱和对国内技术发展的期望。 ——加拿大西蒙弗雷泽大学终身教授,谭平 本书介绍了机器人领域的重要核心技术——状态估计。这本书不只介绍了一些传统的经典算法,也涉及了最的行业进展和应用,同时还传授了一些基础的数学工具。本书使用严谨的数学语言,同时又深入浅出,是初学者不可多得的良师益友。 ——自动驾驶公司AutoX创始人,原美国普林斯顿大学计算机视觉与机器人实验室主任,麻省理工学院博士 肖健雄
机器人学本质上是处理世界上移动的事物。我们生活在一个火星漫游者,无人驾驶飞机测量地球,很快,自动驾驶汽车的时代。而且,虽然特定的机器人有其微妙之处,但在所有的应用,我们也必须面对一些共同的问题,特别是状态估计和控制。机器人的状态是一组量,例如位置、方向和速度,如果知道,这些量可以完全描述机器人随时间的运动。在这里,我们把注意力完全放在估计机器人状态的问题上,而忽略了控制的概念。是的,控制是必不可少的,因为我们想让我们的机器人以某种方式运行。但是,这样做的第一步通常是确定国家的过程。而且,对于实际问题,状态估计的难度往往被低估,因此,将其与控制放在同等的地位上是很重要的。在这本书,我们介绍了高斯测量噪声污染的线性系统的经典估计结果。然后我们研究了非高斯噪声非线性系统的一些推广。与典型的估计文本不同,我们详细研究了如何将一般的估计结果裁剪为在三维空间操作的机器人,提倡一种处理旋转的特殊方法。本简介的其余部分提供了一些估计的历史,讨论了传感器和测量的类型,并介绍了状态估计问题。文章最后对书的内容进行了分类,并提供了一些其他的阅读建议。   大约4000年前,早期的海员面临着一个车辆状态估计问题:如何在海上确定船的位置。早期开发原始海图和观测太阳的尝试使得当地可以沿着海岸线航行。然而,直到15世纪,随着关键技术和工具的出现,在公海上进行全球航行才成为可能。航海罗盘是磁罗盘的早期形式,允许对方向进行粗略的测量。罗盘加上粗略的海图,使人们能够沿着主要目的地(即遵循罗盘方位)之间的垂直线航行,然后逐渐发明了一系列仪器,使人们能够测量遥远点之间的角度(即十字标尺、等高仪、象限仪、六分仪经纬仪)。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值