Unpaired Image Super-Resolution using Pseudo-Supervision

在这里插入图片描述


前言

本文来自2020的CVPR,其创新点来自CycleGAN。

图像超分辨率的目的是从相应的低分辨率(low-resolution,LR)输入构建高分辨率(high-resolution,HR)图像。

一、摘要

作者指出:在大多数超分研究中,数据集需要(LR-HR)一 一配对好,这无疑增加了成本,作者提出一种无需配对数据集的超分问题解决方案。

二、要点

1.所提出一整套方法

在这里插入图片描述
在这里插入图片描述
是通过预先操作将HR图像降级为LR(降尺度操作是σ=(比例因子)/2的高斯模糊和双立方降尺度的组合)

在这里插入图片描述
是原始低分辨率图片
1.
在这里插入图片描述
生成器XY↓:输入原始LR图片,输出操作后的LR(论文中定义为clean LR)
在这里插入图片描述
判别器DY↓:判断是不是clean LR
2.
在这里插入图片描述
生成器Y↓X:输入clean LR,输出X
在这里插入图片描述
判别器DX:判断是不是X
3.
在这里插入图片描述
上采样Y↓X:将clean LR 通过上采样操作转为HR
在这里插入图片描述
判断是不是经过生成器XY↓和上采样Y↓X操作后的图片

2.多种损失融合

在这里插入图片描述
在这里插入图片描述
1是对抗损失,2、3都是CycleGAN中提出的损失,3来自 Huan Fu, Mingming Gong, Chaohui Wang, Kayhan Batmanghelich, Kun Zhang, and Dacheng Tao. Geometryconsistent generative adversarial networks for one-sided unsupervised domain mapping. In CVPR, 2019.

3.网络结构

GXY↓ 和 UYY↓ 使用RCAN, GY↓X 使用几个残差模块和融合层,判别器均采用PatchGAN,这里几个模型的网络结构可能还有改进空间。
还有值得探讨的是,GY↓X模型每个卷积层后面都有BN层,在ESRGAN中BN层被否定。

实验

在这里插入图片描述
对比实验+消融实验
结果是肯定不如几个有一对一数据集的模型的,但是确实是将无监督模型改进了。

总结

CycleGAN在SR的创新应用

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值