深度学习入门课笔记（二）

目录

卷积神经网络

卷积神经网络发展史

猫的视觉系统实验

第一个卷积神经网络雏形——新认知机

第一个大规模商用卷积神经网络——Lenet—5

第一个技惊四座的卷积神经网络——Alexnet

卷积层

 池化层

Lenet-5

---

卷积神经网络

卷积神经网络发展史

猫的视觉系统实验

1.神经元存在局部感受区域（感受野）

2.细胞对角度有选择性

3.细胞对运动方向有选择性

启发：

视觉系统是分层、分级的进行处理，从低级到高级的抽象过程堆叠使用卷积和池化

神经元实际上是存在局部的感受区域的（局部敏感）神经元局部连接

第一个卷积神经网络雏形——新认知机

具有层级结构的神经网络

缺点：无反向传播算法更新权值，模型性能有限

第一个大规模商用卷积神经网络——Lenet—5

缺点：无大量数据和高性能计算资源

第一个技惊四座的卷积神经网络——Alexnet

2012年，AlexNet获得ILSVRC分类任务冠军，拉开了卷积神经网络统治图像领域序幕。

卷积层

补充：图像识别特点：特征具有局部性、特征可能出现在任何位置、下采样图像不会改变图像目标