风格迁移论文"Photorealistic Style Transfer via Wavelet Transforms"

该文介绍了如何通过小波变换改进风格迁移,以解决空间扭曲和伪影问题。作者提出了一种递进式的风格化方法,结合小波下采样和上采样,保留结构信息并提高时域稳定性。此外,对比了Split Pooling和Learnable Pooling,指出小波变换在保持内容特征和风格迁移真实度方面的优势。
摘要由CSDN通过智能技术生成

在这里插入图片描述
基于Whitening and Coloring Transform(WCT)的方法由于其抽象能力强,会出现空间扭曲或者不真实的伪影的情况。作者基于WCT的方法将小波变换嵌入神经网络中,使特征能够保留结构信息以及VGG空间的统计学特性。此外,作者认为基于WCT 2 ^2 2的方法可以提高风格化的时域稳定性。
在这里插入图片描述如上图所示,作者希望WCT 2 ^2 2能够在不使用后处理方法的情况下重建信号,由于小波信息会带来很小的信息损失,作者分析了使用小波下采样和小波上采样的优点。
此外,作者提出了一种递进式的风格化方法而不是多级的策略,递进式的风格化方法比起多级策略好处如下:(1)递进式的方法只需要在训练和测试的环节只使用一个decoder,而多级的训练方法需要在每一个level上都单独训练一个decoder,参数不共享,参数量大,训练困难,测试阶段开销也很大。(2)使用多级的风格化方法会导致伪影在多次encoder-decoder过程中被多次放大,而使用渐进式的方式,其伪影相对而言就少了很多。WCT的论文阅读笔记:WCT论文阅读笔记
在这里插入图片描述
WCT 2 ^2

  • 1
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值