人体姿态估计简介及应用

人体姿态估计简介

人体姿态估计根据估计的关节坐标维度分为2D姿态估计和3D姿态估计。

• 2D人体姿态估计的目标是定位并识别出人体的关键点，这些关键点按照关节顺序相连，就可以得到人体的骨架，人体2D骨架表现形式如下所示：
  
• 3D姿态估计的目标是从图像或视频中估计人体基于某点的人体三维关节坐标(x, y, z)，一般以人体的臀部(Hip)关节为基点，本质上是一个回归问题。
  

人体姿态估计应用

• 动作识别

追踪一段时间内一个人姿态的变化也可以应用在动作、手势和步态识别上。在这方面有好几个应用场景，包括：

用于检测一个人是否摔倒或疾病
用于健身、体育和舞蹈等的自动教学
用于理解全身的肢体语言（如机场跑道信号、交警信号等）
用于增强安保和监控

• Animation、运动捕捉和增强现实

人体姿态估计的一个有趣应用是 CGI（computer graphic image，一种电影制造技术）应用。如果可以检测出人体姿态，那么图形、风格、特效增强、设备和艺术造型等就可以被加载在人体上。通过追踪人体姿态的变化，渲染的图形可以在人动的时候“自然”地与人“融合”。姿态估计的一个有趣应用是在交互游戏中追踪人体对象的运动。比较流行的 Kinect 使用 3D 姿态估计（采用 IR 传感器数据）来追踪人类玩家的运动，从而利用它来渲染虚拟人物的动作。

• demonstration 模仿学习，训练机器人

除了手动为机器人编程、让它们跟随特定的路径，我们也可以让机器人跟随一个做特定动作的人体骨架。人类教练可以仅通过演示特定的动作，来教机器人学习这一动作。接着，机器人就可以计算如何移动自己的活动关节，来进行相同的动作。

参考：

https://medium.com/beyondminds/an-overview-of-human-pose-estimation-with-deep-learning-d49eb656739b
https://www.cnblogs.com/davidwang456/articles/10898205.html
https://github.com/Vegetebird/3D-Human-Pose-Estimation-Notes
https://github.com/fabro66/GAST-Net-3DPoseEstimation