人脸特征点检测：TCDCN

最新推荐文章于 2022-12-10 22:12:13 发布

tinyzhao

最新推荐文章于 2022-12-10 22:12:13 发布

阅读量1.4w

点赞数 5

分类专栏： Computer Vision Deep Learning Face Analysis 人脸识别文章标签：人脸特征点检测深度学习 CNN

本文链接：https://blog.csdn.net/tinyzhao/article/details/52730553

版权

该博客介绍了ECCV2014论文《Facial Landmark Detection by Deep Multi-task Learning》中提出的TCDCN模型。通过深度多任务学习，结合人脸属性如性别、眼镜、微笑和头部姿势等辅助任务，优化人脸特征点检测。文章提出tasks-constrained deep model和task-wise early stopping策略，解决了多任务学习的不同任务收敛速度问题。TCDCN模型在处理遮挡和姿势变化的人脸时表现出色，并且相对于传统的CNN和Cascaded CNN有更优的表现。

摘要由CSDN通过智能技术生成

《Facial Landmark Detection by Deep Multi-task Learning》论文解读

这篇文章发表于ECCV2014，来自香港中文大学汤晓鸥课题组。论文原文见：

http://mmlab.ie.cuhk.edu.hk/projects/TCDCN.html

概述

文章提出了人脸特征点检测的新方法，使用与人脸相关的属性共同学习人脸的特征点位置。

we wish to optimize facial landmark detection together with heterogeneous but subtly correlated tasks, e.g.head pose estimation and facial attribute inference.

具体而言，就是在人脸特征点检测的时候，同时进行多个任务的学习，这些任务包括：性别，是否带眼镜，是否微笑和脸部的姿势。使用这些辅助的属性帮助更好的定位特征点，根据论文结果，这样的确对人脸特征点检测有一定的帮助。这种Multi-task learning的困难在于：不同的任务有不同的特点，不同的收敛速度。针对这两个问题，文章给出前者的解决办法是tasks-constrained deep model，对后者解决办法是task-wise early stopping。文章中的方法在处理有遮挡和姿势变化时表现较好，而且模型比较简单。

如图，人脸特征点检测这一任务可以和多个辅助任务同时进行，对比前人的CNN和Cascaded CNN，本文具有更好的表现。

论文解读

tasks-constrained deep model

传统的多任务学习（multi-task learning）把每个任务都赋予相同的权重

a r g m i n w \sum t = 1 T \sum i = 1 N l (y t i, f (x t i; w t)) + ϕ (w t)

$argmin_{w}\sum_{t=1}^T\sum_{i=1}^Nl(y_i^t,f(x_i^t;w^t))+\phi(w^t)$
损失函数就是不同任务的损失函数直接相加。而在人脸特征点检测的任务中，不同的任务具有不同的loss，特征点检测是平方和误差，而其它分类任务是交叉熵误差，因此最后的loss就是：