空洞卷积dilated conv

空洞卷积(dilated conv)通过增加感受野来提高特征提取能力,但存在网格效应(gridding)导致局部信息丢失和远距离信息相关性弱的问题。解决方案包括精心设计卷积的扩张率序列以及使用Atrous Spatial Pyramid Pooling (ASPP)进行多尺度信息捕获。
摘要由CSDN通过智能技术生成

空洞卷积

a、b、c图卷积核均为3*3,图a和普通的卷积操作一样,a)图对应3x3的1-dilated conv,b)图对应3x3的2-dilated conv,2-dilated conv的前一层是一个1-dilated conv的话,
那么每个红点就是1-dilated的卷积输出,所以感受野为3x3,所以1-dilated和2-dilated合起来就能达到7x7的conv。c)图是4-dilated conv操作,同理跟在两个1-dilated和
2-dilated conv的后面,能达到15x15的感受野

空洞卷积的潜在问题

空洞卷积是存在理论问题的,论文中称为gridding,其实就是网格效应/棋盘问题。因为空洞卷积得到的某一层的结果中,邻近的像素是从相互独立的子集中卷积得到的,相互之间缺少依赖。

  • 局部信息丢失:由于空洞卷积的计算方式类似于棋盘格式,某一层得到的卷积结果,来自上一层的独立的集合,没有相互依赖,因此该层的卷积结果之间没有相关性,即局部信息丢失。
    在这里插入图片描述

解决方案:注意叠加卷积的扩张率的设计,如: dilation rate [1, 2, 5]

  • 远距离获取的信息没有相关性:由于空洞卷积稀疏的采样
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值