基于改进PSGAN的AI自动美颜化妆系统（源码＆教程）

1.研究背景

在计算机视觉领域，基于人脸图像的合成与分析一直是热门的研究课题。人脸表情合成在影视娱乐、人工智能产业应用广泛，自动化妆技术在美妆行业有着巨大的应用前景。虽然人脸图像合成技术在近几年得到了较大的发展，但在表情迁移与妆容迁移方面，仍存在难点与挑战：人脸表情因人而异，是面部肌肉与纹理共同变化的结果，要在保留原始身份的前提下自然清晰地模拟表情的变化并不容易；妆容风格更是千变万化，没有规律可循，同时还受到年龄、种族的影响。因此，在人脸表情迁移与妆容迁移的研究上仍需探索与创新。

2.图片演示

3.视频演示

基于改进PSGAN的AI自动美颜化妆系统（源码＆教程）_哔哩哔哩_bilibili

4.妆容迁移技术研究现状

妆容迁移是指将目标图上的妆容直接迁移到原图上的技术。相比传统贴妆技术，妆容迁移具有极高的自由度，它可以让用户不再局限于设计师设计好的妆容，而是可以自主、任意地从真实模特图中获取妆容，极大地丰富了妆容的多样性。

此外，妆容迁移技术不仅可以迁移五官妆容信息，还可以对肤色、光影等信息进行整体迁移。再加上妆容信息直接来源于真实模特图，因此该技术可以很好地保持妆容的真实度。

但妆容迁移属于目前较新的研究领域，相比于其他 DL 研究任务，需要解决以下两个主要问题：

一是原图和目标图五官位置和姿态都不固定，如何让网络感知不同位置上的妆容信息？
二是该任务很难获取真实环境中的一对一数据，如何让网络正确监督学习？
对于这两个问题，近些年的一些研究者提出了一些解决方案，具体可以总结如下：

对于问题 1，主要采用的解决办法是：设计一种映射和反映射机制（也可以设计网络结构来实现这样的映射），将原图像特征映射为 identity feature 和 makeup feature，这样原图的 identity feature 可以和目标图的 makeup feature 进行组合，将组合特征反映射为图像特征就可以显式地让网络更好地感知妆容信息；

对于问题 2，主要采用的解决办法有两类：a，用一种颜色迁移算法（比如直方图匹配）结合五官分割进行局部颜色迁移，把目标图各五官成分的颜色迁移到原图对应的五官成分上，这样网络输出的五官区域就可以和颜色迁移后的五官区域直接做 loss 进行学习；b，结合人脸点用一种形变算法（比如三角网格形变）将目标图 warp 到原图上，这样原图和目标图的五官就基本对齐了，再设计 loss 进行监督训练。

研究者们的创新方案收获了很多成果。目前，对于原图和目标图姿态比较接近且肤色差异较小的情况下，参考该博客提出的方案能比较好地迁移五官妆容的颜色信息。

然而，对于真实用户复杂多变的环境（复杂姿态、复杂光照、复杂妆容等）以及更多细腻细节的迁移需求（睫毛、眼瞳、亮片闪片等），妆容迁移技术依然面临着很大挑战。

5.算法流程图

（1）通过 M