AI 基于GAN的图像翻译模型 Pix2Pix

Pix2Pix是一种使用条件对抗网络解决图像到图像转换问题的方法,其结合了L1 Loss和GAN Loss以提高图像生成质量。通过U-Net结构和PatchGAN,该模型能够进行像素级别的映射,尽管在处理未见过的数据时可能会遇到挑战。
摘要由CSDN通过智能技术生成

年轻的时候,我们爱得死去活来,可随着年岁渐长,你就会发现,爱情并不是生活的全部。
善良,努力,读书,健身,让自己变得更好才是人生最重要的事。

前言

简介:伯克利大学研究提出的使用条件对抗网络作为图像到图像转换问题的通用解决方案。图像到图像转换的问题其实也就是像素到像素(Pix2Pix)的映射问题。

Github Demo:Pix2Pix

官网:Image-to-Image Translation with Conditional Adversarial Nets

论文:Image-to-Image Translation with Conditional Adversarial Networks

前阵子很出名的DeepNude:DeepNude-an-Image-to-Image-technology

原理介绍

GAN实现原理:GAN 在结构上受博弈论中的二人零和博弈 (即二人的利益之和为零,一方的所得正是另一方的所失) 的启发,系统由一个生成器和一个判别器构成。

名词 说明
GAN 生成对抗网络,Generative adversarial networks。
Generator 生成器,尽量去学习真实的数据分布。
Discriminator 判别器,尽量正确的判别输入数据是来自真实数据还是来自生成器。
训练结束标准 当最终 D 的判别能力提升到一定程度,并且无法正确判别数据来源时,可以认为这个生成器 G 已经学到了真实数据的分布。

价值函数表达

V ( G , D ) = E x ∼ p d a t a ( x ) l o g D ( x ) + E z ∼ p z ( z ) l o g ( 1 − D ( G ( z ) ) ) V(G,D)=E_{x\sim p_{data}(x)}logD(x)+E_{z\sim p_{z}(z)}log(1-D(G(z))) V(G,D)=Expdata(x)logD(x)+Ezpz(z)log(1D(G(z)))

参数 解析
m i n G   m a x D \underset{G}{min}\ \underset{D}{max} Gmin Dmax 零和博弈
D D D 可微判别器函数
G G G 可微生成器函数
E E E 数学期望
x ∼ p d a t a x\sim p_{data} xpdata x x x服从于真实数据 d a t a data data的概率密度
z ∼   p z ( z ) z\sim \ p_{z}(z) z pz(z) z z z服从于初始化数据的概率密度
l o g D ( x ) logD(x) logD(x) 正类的对数损失函数(正类:即能判别出x属于真实分布。)
l o g ( 1 − D ( G ( z ) ) ) log(1-D(G(z))) log(1D(G(z))) 负类的对数损失函数(正类:即能判别出x属于生成分布。)
E x ∼ p d a t a ( x ) l o g D ( x ) E_{x\sim p_{data}(x)}logD(x) Expdata(x)logD(x) 根据正类的对数损失函数构建,取最大值则意味着令判别器 D D D x x x服从于 d a t a data data的概率密度时能准确预测 D ( x ) = 1 D(x)= 1 D(x)=1,即 D ( x ) = 1   w h e n   x ∼ p d a t a ( x ) D(x)= 1 \ when \ x\sim p_{data}(x) D(x)=1 when xpdata(x)
E z ∼ p z ( z ) l o g ( 1 − D ( G ( z ) ) ) E_{z\sim p_{z}(z)}log(1-D(G(z))) Ezpz(z)log(1D(G(z))) 根据负类的对数损失函数构建,企图欺骗判别器的生成器。

零和博弈函数表达

根据上述的价值函数,可以提出零和博弈函数。

给定生成器 G G G,由价值函数可以推导出最优判别器的表述 D G ∗ D_G^* DG为:

D G ∗ = a r g m a x D V ( G , D ) D_G^*=arg\underset{D}{max}V(G,D) DG=a

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值