ResNet残差网络

残差网络顾名思义,相当于走过了一条捷径,将前面的层直接输入到后面的层,放在后面层的线性激活之后,非线性激活之前,然后与后面层一起经过非线性计算,在计算的时候作为一个小尾巴,共同和当前层一起组成所谓的残差块。

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-JQ8NKfTF-1621049983019)(assets/image-20210513213258-ha77rc2.png)]{: id="20210515113939-wlzi6hp" updated="20210513213258"}

计算的时候跟随下一层的非线性激活函数进行计算,作为relu()中的一项。
残差网络实现的关键在于拥有很多相同的卷积,这就使输入的维度和输出的维度可以保持一致,从而可以让残差网络进行跳远连接,构建多个残差块,优化网络性能,在现在许多网络中,比如inception network,VGG-16,Google-Net,YOLO中都有所应用。

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值