摘要:
尽管在图像-图像转换公式中通过训练一个编码器-解码器网络在图像降雨方面取得了显著的进展,但模糊且缺少细节的结果表明了现有模型的不足。将解雨编码器-解码器网络解释为条件发生器,解码器作为条件发生器对编码器学习的嵌入进行处理,可以将输出结果不理想归结为编码器学习的嵌入质量不高。在这篇文章中,我们假设存在一个内在的映射,从低质量的嵌入到一个潜在的最优嵌入,这样生成器(解码器)可以产生更好的结果。我们提出通过构造残差学习分支来学习这种映射,残差学习分支能够自适应地将残差添加到原始的低质量嵌入表示中。
做了两组实验:
1.去雨后的图------ 去雨后的图PSNR=49.51dB and SSIM=0.9948)
2. 带雨的图---------去雨后的图 (with PSNR=31.67dB and SSIM=0.9195)
原因:
输入图像的不同,输入的差异可以进一步解释为学习嵌入的差异。如果编码嵌入可以学习到更多的细节信息(纹理,颜色),解码器就可以很好的进行复原。
创新点:
具体来说,该模型首先被训练来学习一个描述雨不变性的基本嵌入(与主编码器和解码器一起)。我们假设在潜在的嵌入空间中存在从基本嵌入到最优嵌入的平滑连接,提出用残差学习来学习这种连接。第二步用残差编码
[图像去雨]--ICCV2019-ERL-Net:Entangled Representation Learning for Single Image De-Raining
最新推荐文章于 2023-01-20 13:51:44 发布