MultiPoseNet: Fast Multi-Person Pose Estimation using Pose Residual Network
2018
paper:https://arxiv.org/pdf/1807.04067.pdf
code:https://github.com/mkocabas/pose-residual-network
MultiPoseNet : 自上而下的多人姿态估计,将多任务模型与新的分配方法相结合。MultiPoseNet可以联合处理人员检测、关键点检测、人员分割和姿态估计等问题。该方法采用位姿残差网络(PRN)实现,通过接收关键点和人的检测,将关键点分配给人的实例,生成精确的位姿。
我认为本文的创新是:通常的自上而下的策略,需要先需要人体检测网络的人体bounding boxs的proposals。在对每一个boundingbox进行关键点的预测。自下而上的策略,需要对全局所有的关键点,进行聚类。本文综合了两种测略的有点,提出的结构有两个subnets。第一个是keypoint subnet,它可以回归所有的关键点和人体的语义分割的heatmap。第二个是person detection subnet,和人体检测网络相似,可以检测到图片中的人体。之后的PRN就可以把关键点和人体结合起来了。