行人姿态估计--Realtime Multi-Person 2D Pose Estimation using Part Affinity Fields

Realtime Multi-Person 2D Pose Estimation using Part Affinity Fields
CVPR 2017
Code: https://github.com/ZheC/Realtime_Multi-Person_Pose_Estimation
效果演示视频: https://youtu.be/pW6nZXeWlGM 如果可以看youtu 的话

多人姿态实时估计,这里主要亮点还是 多人实时+效果

感兴趣的可以看看相关文献: Convolutional Pose Machines   CVPR2016
http://blog.csdn.net/shenxiaolu1984/article/details/51094959

本文算法主要流程如下:
这里写图片描述

输入一幅图像,经过卷积网络提取特征,得到一组特征图,然后分成两个岔路,分别使用 CNN网络提取Part Confidence Maps 和 Part Affinity Fields ,得到这两个信息后,我们使用图论中的 Bipartite Matching 将同一个人的关节点连接起来得到最终的结果。

Part Affinity Fields 示意图:
这里写图片描述

两个分叉的CNN网络如下图所示:
这里写图片描述
a set of feature maps F ,confidence maps S,Part Affinity Fields L。
上面是一个迭代优化过程

这里写图片描述

为什么使用 Part Affinity Fields ?
这里写图片描述

Graph matching
这里写图片描述

结果对比:
这里写图片描述

COCO 2016 keypoint challenge:
这里写图片描述

有问题的图片:
这里写图片描述

时间分析:
GTX-1080 GPU
The original frame size is 1080×1920, which we resize to 368×654 during testing to fit in GPU memory

Our method has achieved the speed of 8.8 fps for a video with 19 people.

for 9 people, the parsing takes 0.58 ms while CNN takes 99.6 ms

©️2020 CSDN 皮肤主题: 深蓝海洋 设计师: CSDN官方博客 返回首页
实付0元
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值