阅读小结:Stacked Hourglass Networks for Human Pose Estimation

标签: 神经网络 深度学习 行人识别 姿态检测 沙漏网络
4769人阅读 评论(2) 收藏 举报
分类:

arXiv: https://arxiv.org/pdf/1603.06937v2.pdf

github: https://github.com/anewell/pose-hg-train



What:

人体关键点预测,输入人体图像输出几个关键点。

使用了反复迭代bottom down/  top down 这个策略在人脸landmark 甚至更早像ASM就有,反复迭代来更精确。

但在CNN上具体是怎么操作的呢?(文题中的hourglass沙漏就是指结构像沙漏一样吧)


How:

1. 基本块

他们使用residual 作为基本网络结构


1*1 的卷积降维256->128 ,3*3 的卷积,1*1的卷积升维128->256


2. 单个沙漏网络的拓扑结构是对称的,结构类似fully convolutional network for semantic segmentation,(语义分割的那篇CVPR paper)

最终一共使用了8个沙漏网络。每个沙漏网络的输入都为 64*64.  (输入图片大小为256*256,一开始经过一次7*7 stride2 的conv 和一次 maxpooling  变成64)



3.如上图,在每次pooling之后都会有1个basic building block 加到之后 upsampling中相同大小的map中。

(这里可以看出每个pooling前的feature map都是256 channel的,up sampling的时候也是256 channel的)


4. 使用了中层监督,对前几个沙漏网络也有loss,这和训练深层res net/inception net一样。而loss的方法如下图


蓝色是prediction(这里有map的 regression Loss),有一路直传,一路从上一个沙漏网络来,三路加到一起传到下一个沙漏



查看评论

【人体姿态】Stacked Hourglass算法详解

Newell, Alejandro, Kaiyu Yang, and Jia Deng. “Stacked hourglass networks for human pose estimation.”...
  • shenxiaolu1984
  • shenxiaolu1984
  • 2016-05-17 22:55:47
  • 16983

Stacked Hourglass Networks for human pose estimation

摘要 这篇文章提出了一个新颖的ConvNet架构,应用于人体姿态估计。作者认为重复使用 bottom-up,top-down能够提升网络性能。作者将这个网络命名为“stacked hourglass...
  • u013068978
  • u013068978
  • 2016-06-18 23:55:57
  • 3209

OPENGL在VC中的配置及出现“无法定位程序输入点_glutInitWithExit于动态链接库glut32.dll上”的解决方案

首先,说明如何在VC中配置OPENGL开发环境。 在开始之前,首先确保你的VC已经包含了相应的OpenGL库文件,否则,将无法进行编译。若没有的话,可以在网上下一个。 然后解压,将INCLUDE文...
  • oJiMoDeYe12345
  • oJiMoDeYe12345
  • 2015-09-23 16:55:50
  • 2091

论文阅读理解 - Stacked Hourglass Networks for Human Pose Estimation

Stacked Hourglass Networks for Human Pose Estimation keywords 人体姿态估计 Human Pose Estimation 给定单张...
  • oJiMoDeYe12345
  • oJiMoDeYe12345
  • 2017-05-25 17:48:02
  • 5355

论文阅读:《Stacked Hourglass Networks for Human Pose Estimation》ECCV 2016

概述本文仍然是使用全卷积神经网络,对给定的单张RGB图像,输出人体关键点的精确像素位置,使用多尺度特征,捕捉人体各关节点的空间位置信息。网络结构形似沙漏状,重复使用top-down到bottom-up...
  • qq_36165459
  • qq_36165459
  • 2017-10-23 18:07:03
  • 1571

Stacked Hourglass Networks for Human Pose Estimation

stacked hourglass networks for human pose estimation 1、convolution 滤波(或者叫相关),滤波操作就是图像对应像素与掩膜(mask...
  • gloriazhang2013
  • gloriazhang2013
  • 2017-06-13 13:37:16
  • 261

论文阅读理解 - Multi-Context Attention for Human Pose Estimation

Multi-Context Attention for Human Pose Estimation [Paper] [Torch-Code] [valse2017/ppt] 整合多内容信息注...
  • oJiMoDeYe12345
  • oJiMoDeYe12345
  • 2017-09-08 17:25:29
  • 2054

论文实践学习 - Stacked Hourglass Networks for Human Pose Estimation

Stacked Hourglass Networks for Human Pose Estimation - Demo Code Stacked Hourglass Networks for Hum...
  • oJiMoDeYe12345
  • oJiMoDeYe12345
  • 2017-05-26 09:48:36
  • 3379

姿态检测整理--01-Stacked Hourglass Networks for Human Pose Estimation

Stacked Hourglass Networks for Human Pose Estimation(发表于2016年)基本上是目前姿态研究的基础网络,具有bottom-up和top-down二者...
  • daniaokuye
  • daniaokuye
  • 2017-11-27 15:14:11
  • 506

论文实践学习 - Multi-Context Attention for Human Pose Estimation

类似于 论文实践学习 - Stacked Hourglass Networks for Human Pose Estimation ,基于Docker-Torch,估计人体关节点. 这里只简单进行...
  • oJiMoDeYe12345
  • oJiMoDeYe12345
  • 2017-09-09 11:21:31
  • 1444
    个人资料
    持之以恒
    等级:
    访问量: 9万+
    积分: 1293
    排名: 3万+
    关于我