gt类型
Coordinate
Heatmap
Heatmap + Offsets
Heatmap(热图)与Coordinate(直接回归)的本质区别:
- heatmap被广泛使用在人体骨架的问题里面。人脸关键点与之不同,一般会直接回归出关键点的坐标。
- 人脸关键点的问题相对简单,对速度很敏感,而直接回归相比heatmap来讲速度会更快。
- 在没有很好的context信息的情况下,很难区分左右躯干。heatmap可以让两侧都能有比较好的响应,便于后续进行refine。
- heatmap方式是比较中间状态的表示,建模能力更强,信息的保存会更丰富,更能cover自由度很大的人体姿态。
- 当目标点附近的像素点也很像目标点时,若直接将其标为负样本,会给网络的训练带来干扰。而将其用高斯函数做一个“软标注”,会让训练变得简单,收敛更快。