Beyond Face Rotation: 使用全局和局部特征的双通道generator生成正脸

该博客介绍了如何运用全局和局部感知的双通道GAN(TP-GAN)来实现照片级真实感且保留身份信息的正面人脸合成。通过像素损失、对称损失、对抗损失、身份保持损失以及正则化等多方面损失函数,确保生成的正脸图像既逼真又保持原始身份特征。
摘要由CSDN通过智能技术生成

        Beyond Face Rotation:超级面部旋转

        Global and Local Perception GAN for Photorealistic and Identity Preserving Frontal View Synthesis:全局和局部感知的GAN用于分析合成正面图片。

        Abstract

      
#使用TP-GAN合成正面视图(此处指人脸)。上半部分展示了90°侧脸(中间)以及生成的和真实的正脸。我们邀      请读者来猜测哪边是合成的。下半部分分别展示了从90°、75°、45°侧脸生成的正脸。


  一   要解决的问题:

            基于单张人脸图像的正面视图(即正脸)合成,在人脸识别领域有广泛的应用。

二    本文使用的方法

     1    two-pathway GAN:双通道GAN,一个global ,一个local。


2 loss function

判别器loss:maximum 生成图片与真实图片,使用交叉熵

生成器(创新点)loss,由五个部分组成:

2.1 pixel loss


像素损失


使用拉普拉斯像素损失,就是算个mean_pixelloss.

2.2 symmetry loss

对称损失:利用人脸的对称性

图像左右两个部分对应像素的L1损失

2.3 adversarial loss

对抗损失:同单通道GAN相同


2.4  Identity Preserviing loss

身份验证损失:

Light CNN 最后两层的身份验证损失

2.5 total variation regularization

添加了正则损失

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值