花书笔记 卷积网络(9.5 基本卷积函数的变体)

本文介绍了卷积网络中步幅(stride)和零填充(padding)的概念,包括有效卷积、相同卷积和全卷积的优缺点。步幅大于1的卷积等价于单位步幅卷积后的降采样。零填充用于保持输出尺寸,其中有效卷积可能导致显著的尺寸缩减,相同卷积确保输出与输入尺寸相同,而全卷积则过度填充。局部连接和平铺卷积作为卷积的变种,提供了不同空间特征的捕获方式。
摘要由CSDN通过智能技术生成

步幅(stride)

步幅为s的卷积运算数学表达式

Z_{i,j,k}=c(\bold{K,V},s)=\sum_{l,m,n}{[V_{l,(j-1)*s+m,(k-1)*s+n}K_{i,l,m,n}]}

步幅大于一个像素的卷积在数学上等价于单位步幅的卷积随后降采样(down-sampling)

上图表示两种步幅(stride)为2的卷积运算方法,后者计算了许多被舍弃的值,在计算上是浪费的。

 

零填充(padding)

如果不加入零填充操作(即在输入 V 的外围用 0 填充),每层的输出的宽度会随着卷积层的深入而减小。缩减的幅度是比核少一个像素。假如使用的核(kernel)比较大,缩减的幅度就很大,那么网络空间的宽度就会快速缩小。否则就必须要选择一个较小的核。

以下列出三种零填充情况。

有效卷积(valid):无论如何不使用零填充操作。

优点:输出的所有像素都是输入中相同数量像素的函数;输出像素的表示比较规范。

缺点:加入输入图像的宽度是m,核的宽度是k,那么输出的宽度就会变成 m-k+1 。当核的宽度比较大时,缩减率就非常显著

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值