在使用倒残差结构时需要注意下,并不是所有的倒残差结构都有shortcut连接,只有当stride=1且输入特征矩阵与输出特征矩阵shape相同时才有shortcut连接(只有当shape相同时,两个矩阵才能做加法运算,当stride=1时并不能保证输入特征矩阵的channel与输出特征矩阵的channel相同)。
这点是因为如果add操作时,必须要输入通道、大小都要和输出的通道、大小一致才行,所以倒残差结构不是都有shortcut连接,那思考一下为什么残差结构都有shorcut连接?且有的是虚线?是因为虚线是输入和输出不一样的时候再上面加了一个1*1的卷积,升维或者降维了,这样输入和输出一样了。