简单神经网络

神经网络基础与人工神经网络

神经网络方面的研究很早就已出现，今天“神经网络”已是一个相当大的、多学科交叉的学科领域。神经网络中最基本的成分是神经元模型。

上图中每个圆圈都是一个神经元，每条线表示神经元之间的连接。我们可以看到，上面的神经元被分成了多层，层与层之间的神经元有连接，而层内之间的神经元没有连接。

感知器

为了理解神经网络，我们应该先理解神经网络的组成单元——神经元。神经元也叫做感知器。还记得之前的线性回归模型中权重的作用吗？每一个输入值与对应权重的乘积之和得到的数据或通过激活函数来进行判别。下面我们看一下感知器：

可以看到，一个感知器有如下组成部分：

• 

我们了解过sigmoid函数是这样,在之前的线性回归中它对于 二类分类 问题非常擅长。所以在后续的多分类问题中，我们会用到其它的激活函数

神经网络

那么我们继续往后看，神经网络是啥？

神经网络其实就是按照一定规则连接起来的多个神经元。

• 输入向量的维度和输入层神经元个数相同
• 第N层的神经元与第N-1层的所有神经元连接，也叫 全连接
• 上图网络中最左边的层叫做输入层，负责接收输入数据；最右边的层叫输出层，可以有多个输出层。我们可以从这层获取神经网络输出数据。输入层和输出层之间的层叫做隐藏层，因为它们对于外部来说是不可见的。
• 而且同一层的神经元之间没有连接
• 并且每个连接都有一个权值，

那么我们以下面的例子来看一看，图上已经标注了各种输入、权重信息。

对于每一个样本来说，我们可以得到输入值x_1,x_2,x_3x​1​​,x​2​​,x​3​​,也就是节点1，2，3的输入值，那么对于隐层每一个神经元来说都对应有一个偏置项bb，它和权重一起才是一个完整的线性组合

这样得出隐层的输出，也就是输出层的输入值.

矩阵表示

同样，对于输出层来说我们已经得到了隐层的值，可以通过同样的操作得到输出层的值。那么重要的一点是&#x