LeNet/AlexNet/VGGNet/Inception/ResNet
LeNet:简单完整基本CNN模型的开端
AlexNet:(1)网络扩大(5Conv+3FC+1softmax);(2)加入Relu;(3)解决过拟合;(4)多GPU计算
VGGNet:网络扩大到十几层
Inception:GooleNet,原来的结点也是网络,网络进一步扩大,性能提升2-3倍。解决过拟合和大模型计算量大的问题。
ResNet:(1)利用残差学习;(2)网络扩大达到1000+层,复杂度保持较低。解决层数太多太深的网络梯度消失的问题。
备注:网络越深,效果并非越好。网络越深,梯度消失问题越严重,网络的堆叠其复杂度可能会加大,训练效果可能越差。