卷积神经网络CNN_综述一

CNN卷积神经网络架构综述

深度学习算法最近变得越来越流行和越来越有用的算法,然而深度学习或者深度神经网络的成功得益于层出不穷的神经网络模型架构。这篇文章当中作者回顾了从1998年开始,近18年来深度神经网络的架构发展情况。


图中的坐标轴我们可以看出横坐标是操作的复杂度,纵坐标是精度。模型设计一开始的时候模型权重越多模型越大,其精度越高,后来出现了resNet、GoogleNet、Inception等网络架构之后,在取得相同或者更高精度之下,其权重参数不断下降。值得注意的是,并不是意味着横坐标越往右,它的运算时间越大。在这里并没有对时间进行统计,而是对模型参数和网络的精度进行了纵横对比。

其中有几个网络作者觉得是必学非常值得学习和经典的:AlexNet、LeNet、GoogLeNet、VGG-16、NiN。

如果你想了解更多关于深度神经网络的架构及其对应的应用,不妨看一下这篇综述 An Analysis of Deep Neural Network Models for Practical Applications


网络架构

LeNet5

1998年。LeCun乐春大神发布了

  • 6
    点赞
  • 34
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
卷积神经网络(Convolutional Neural Network,CNN)是一种深度学习模型,广泛应用于计算机视觉领域。下面是卷积神经网络的发展综述: 1. LeNet-5:LeNet-5是卷积神经网络的鼻祖,由Yann LeCun等人于1998年提出。它是一个用于手写数字识别的模型,包含了卷积层、池化层和全连接层等基本组件。 2. AlexNet:AlexNet是由Alex Krizhevsky等人于2012年提出的模型,通过在ImageNet图像识别竞赛中取得了显著的突破。AlexNet采用了更深的网络结构和更大的数据集,引入了ReLU激活函数和Dropout正则化技术,对卷积神经网络的发展起到了重要推动作用。 3. VGGNet:VGGNet是由Karen Simonyan和Andrew Zisserman于2014年提出的模型,其特点是网络结构非常深,并且所有卷积层都采用了3x3的小卷积核。VGGNet在ImageNet竞赛中取得了很好的成绩,证明了深度网络的有效性。 4. GoogLeNet:GoogLeNet是由Google团队于2014年提出的模型,其主要贡献是引入了Inception模块,通过并行使用不同大小的卷积核和池化操作,提高了网络的表达能力。GoogLeNet在ImageNet竞赛中取得了较好的结果,并且具有较低的参数量。 5. ResNet:ResNet是由Kaiming He等人于2015年提出的模型,其主要贡献是引入了残差连接(Residual Connection),解决了深度网络训练过程中的梯度消失和梯度爆炸问题。ResNet在ImageNet竞赛中取得了非常好的成绩,并且成为了后续模型设计的基础。 6. MobileNet:MobileNet是由Google团队于2017年提出的模型,其主要目标是设计轻量级的卷积神经网络,以适应移动设备等资源受限的场景。MobileNet采用了深度可分离卷积(Depthwise Separable Convolution)等技术,大幅减少了参数量和计算量。 7. EfficientNet:EfficientNet是由Mingxing Tan和Quoc V. Le于2019年提出的模型,通过自动化模型缩放方法,同时优化网络深度、宽度和分辨率,实现了在计算资源有限情况下最优的模型设计。EfficientNet在多个图像分类任务中取得了领先的性能。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

xiangyong58

喝杯茶还能肝到天亮,共同进步

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值