MTCNN论文阅读笔记

论文：Joint Face Detection and Alignment Using Multitask
Cascaded Convolutional Networks

简称MTCNN，是一个用于人脸检测与对齐的三级联CNN网络，把人脸检测与对齐联系起来。

论文主要提出一个从粗到细的级联多任务框架用于人脸的检测与对其，并提出online hard sample mining strategy，该策略可以提升性能。

online hard sample mining strategy：训练过程中，对loss进行排序，根据排序结构选择N个loss值最大的样本进行反向传播，更新权重，即侧重对Loss值大（hard sample）进行权重调整，当然这里由于很多候选框对应的是同一个位置，loss值是相近的，所以针对这个问题，提出的解决方法是：对hard做nms，然后再选择样本反向传播，这里nms选择的IoU=0.7。

引言：
人脸检测的发展历程,先是VJ框架（Haar-Like + AdaBoost），然后再到DPM模型，再到深度学习方法的引入。
人脸对齐的发展历程，一般两种方法：回归，模板拟合方法。
然而，以往的人脸检测和人脸对齐方法忽略了这两种任务之间的内在相关性，虽然已有人试图共同解决这些问题，但这些方案仍然存在局限性。