超分扩散模型 SR3 可以做图像去雨、去雾等恢复任务吗？_扩散模型去雾

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

需要这份系统化资料的朋友，可以戳这里获取

	- [主要的点](#_12)
	- [如何进行图像恢复](#_18)
	- [README](#README_28)

前言

关于扩散模型以及条件扩散模型的介绍，大家可以前往我的上一篇博客：扩散模型diffusion model用于图像恢复任务详细原理 (去雨，去雾等皆可)，附实现代码。

SR3是利用扩散模型进行图像超分辨率研究的，它在使用低分辨率图像作为条件来进行反向采样时先将低分辨率图像直接上采样到高分辨率图像。因此，它通过一些改进可以作为图像恢复这种输入与输出图像大小相等的任务。

代码及原文链接

原文：https://arxiv.org/abs/2104.07636
源代码：https://github.com/Janspiry/Image-Super-Resolution-via-Iterative-Refinement
我用它来做图像恢复的代码：图像去雨、去雾等恢复任务：代码简化的SR3扩散模型，有注释及实验流程

主要的点

SR3模型将DDPM中的残差块替换为BigGAN的残差块，并将跳跃连接重新缩放

1

2

\frac{1}{\sqrt{2}}

2

​1​。
增加了剩余块的数量，以及不同分辨率下的通道乘法器。
还有一个拼接操作，就是将低分辨图像直接上采样后的图像与噪声图像进行拼接，从而实现条件噪声估计。

如何进行图像恢复

1. 源代码中包括大量的小文件，不适合初学者调试和使用。
2. 我根据其核心代码进行简化，将一些不必要的代码文件和代码块删除，并在Rain13K (就是MPRNet、Restormer等方法使用的去雨数据集) 上进行了实验，目前取得不错的表现。可以参考下边的对比。
   

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**