深度学习的小故事

人工智能三学派

行为主义、符号主义和连接主义

行为主义：是基于控制论的，是在构建感知、动作的控制系统。

符号主义：基于算数逻辑表达式。即在求解问题时，先把问题描述为表达式，
再求解表达式。例如在求解某个问题时，利用 if case 等条件语句和若干计算公式
描述出来，即使用了符号主义的方法，

连接主义：仿造人脑内的神经元连接关系，使人类不仅具备理性思维，还具
备无法用公式描述的感性思维，如对某些知识产生记忆。

深度学习基于连接主义

深度学习就是 基于 模仿 人脑中神经元，从而进行预测。
连接主义的神经网络模仿神经元，使计算机具有感性思维。

下图是人脑从出生到成年，人脑中神经网络的变化。

随着我们的成长，大量的数据通过视觉、听觉涌入大脑，使我们的神经网络
连接，也就是这些神经元连接线上的权重发生了变化，有些线上的权重增强了，
有些线上的权重减弱了。

设计神经网络

准备数据，数据量越大越好，要构成特征和标签对。

搭建神经网络的网络结构，并通过反向传播，优化连线的权重，直到模型的识别准确率达到要求，得到最优的连线权重，把这个模型保存起来。

最后，用保存的模型，输入从未见过的新数据，它会通过前向传播，输出概率值，概率值最大的一个，就是分类或预测的结果。