2019 IJCNN之GAN(image transfer(face)):Attention-Guided Generative Adversarial Networks for Unsupervis

本文提出了一种名为AGGAN的注意力引导生成对抗网络,用于解决image-to-image转换中仅能转换低级特征的问题。AGGAN通过内置的注意力机制生成高质量的目标图像,其注意力导向的生成器和鉴别器可以更精确地处理语义对象,同时减少了不需要的变化。在CelebA、RaFD等数据集上的实验表明,AGGAN在面部表情转换方面表现出优越性能。
摘要由CSDN通过智能技术生成

Attention-Guided Generative Adversarial Networks for Unsupervised Image-to-Image Translation

当前的问题及概述
通过GAN网络针对image-to-image translation任务目前只能转换low-level特征,而不能转换high-level特征,主要原因是生成器无法检测出图像中最能体现语义的部分,从而导致生成的图像质量较差。
针对这一局限性,本文提出了一种基于注意力引导的生成对抗网络(AGGAN),该网络可以在不使用额外数据和模型的情况下,检测出最具辨识性的语义对象,并将不需要的部分变化最小化。AGGAN中的注意导向发生器通过内置的注意机制产生attention mask,然后将输入图像与注意遮罩融合,得到高质量的目标图像。此外,本文还提出了一种新的只考虑被关注区域的注意力引导鉴别器。
在这里插入图片描述
上图左边是cycleGAN、DualGAN等框架,右边是本文所提出的AGGAN,AGGAN的生成器可以通过内置的注意模块生成attention mask(Mx和My),然后将生成的attention mask和content mask与输入图像混合,得到目标图像。此外,我们还提出了两种仅考虑被关注区域的注意导向鉴别器DXA和DYA。
模型及loss
AGGAN:

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值