【论文阅读】Facial Motion Prior Networks forFacial Expression Recognition

Fig.1 显示了拟议的FMPN框架的体系结构，该框架由三个网络组成：面部运动掩码发生器（FMG）、先验融合网络（PFN）和分类网络（CN）。构建FMG是为了生成一个掩码，即人脸运动掩码，它突出显示给定灰度表情人脸的运动区域。PFN的目标是将原始输入图像与FMG生成的人脸运动掩码融合，将局部知识引入到整个框架中。CN是一种典型的卷积神经网络（CNN），用于特征提取和分类，如VGG、ResNet或Inception。

面部表情是由面部肌肉收缩引起的，相同表情，不同的人具有相似的模式。因此，对于一种特定类型的面部表情，我们将肌肉运动区域建模为表情脸与其对应的中性脸之间的差异，而相似性特征则通过平均相同表情类别中，所有训练实例的上述差异来建模。如下式：

 (.)代表人脸对齐，因为掩码是中性脸与表情脸之间的绝对误差。(.)代表直方图均衡化。

下图显示了CK+