Image style transfer

本文介绍了一种使用Adaptive Instance Normalization(AdaIN)实现实时任意风格转移的方法,简化了传统GAN风格转移的复杂性。通过预训练的VGG模型编码内容和风格图像,然后在特征空间应用AdaIN进行风格转换,最后由解码器恢复成图像。这种方法解决了模型复杂、训练困难及不能任意风格转换的问题,转换效果与效率表现优秀。
摘要由CSDN通过智能技术生成

论文Arbitrary Style Transfer in Real-time with Adaptive Instance Normalization

图像风格变换的任务是,把一种风格域S1的图像转换成另一种风格域S2的图像。风格变换的同时保存图像的内容不变。

GAN火起来之后,有一些用GAN做图像风格变换的应用,比如Cycle GAN/Dual GAN/Disco GAN。他们的一般结构是使用两对G与D的组合,以确保转换风格而不变换内容。结构略庞大了一些,训练不方便。
而要提到的这批论文,想法和实现都很简单,转换效果也是很不错的。

要解决的问题

ok,先吐槽一下其它style transfer方法的弊端
1. 模型复杂,训练难
2. 不能完成任意风格变换。比如,训练时使用两中风格S1,S2,那么该模型能做的也就是这两种风格间的变换。
3. 有一些方法,依靠浅层的特征,比如直方图统计,而不能抓住图像的语义信息。

作者主要受到了两点启发
1. 论文Image Style Transfer Using Convolutional Neural Networks,在特征空间操作风格的变换。
2. Batch Normalization,Instance Normalization

方法

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值