棋盘效应(Checkerboard Artifacts)

本文详细介绍了反卷积操作中的棋盘效应,即由于卷积核大小与步长不匹配导致的图像颜色不均匀问题。解决方法包括确保卷积核与步长的整除关系,以及通过先进行插值上采样后再进行反卷积来避免这种现象。这些策略在超分辨率等领域的实践中颇为常见。
摘要由CSDN通过智能技术生成
  • 定义:棋盘效应是由于反卷积的“不均匀重叠”(Uneven overlap)的结果。使图像中某个部位的颜色比其他部位更深:

    • 在这里插入图片描述
  • 具体原因:在反卷积操作时,如果卷积核(Kernel)大小不能被步长(Stride)整除时,反卷积输出的结果就会不均匀重叠:

    • 在这里插入图片描述
  • 在二维情况下棋盘效应更为严重,如下:

    • 在这里插入图片描述
  • 原则上,网络可以通过训练调整权重来避免这种情况。解决方法就是注意调整好卷积核(Kernel)大小与步长(Stride)的关系。

  • 不重叠(图a: kernel <= stride)与均匀重叠(图b: kernel % stride == 0)均可避免此类情况:

    • 在这里插入图片描述
  • 还可以“先进行插值Resize操作,再进行反卷积操作”来避免:

    • 在这里插入图片描述
  • 该方式在超分辨率的相关论文中比较常见。例如我们可以用常见的图形学中常用的双线性插值和近邻插值以及样条插值来进行上采样。


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值