可以说CNN的是完全由神经科学的启发而产生的。有必要了解其相关的神经科学知识。神经科学家对猫的视觉研究得出猫的神经神经是分层的, 不同层对物体的辨别功能不同, 比如较上层视觉神经辨别轮廓, 下层辨别细节等。
而这一研究获得的诺贝尔奖, 之后计算机科学家对深度学习的研究, 根据这一原理, 获得了图灵奖。
- 人类视觉看到的物体其实是通过光线进入视网膜, 再刺激光感细胞, 再传到大脑的视觉控制区产生的。所以视觉并非眼睛决定,眼睛只是通道, 而真正的认知是由大脑决定的。正是根据这一发现, 有了CNN。
- 视网膜好比2D的照片。
- 视觉神经细胞好比激活函数。
- 而人类的视觉分辨率其实是很低的, 许多部分是通过大脑的经验决定的, 从而CNN也可以有不同的层决定不同的功能, 最后输出由激活函数决定。