先来一张图解决我对于一些概念上的疑惑
神经网络的单个节点
如图所示,定义:
则改节点的计算结果为:
φ(v)为激活函数。
无隐层的神经网络(梯度下降算法)
如果激活函数φ(v)是线性函数,那么可以证明即使神经网络有隐层,也可以找到一个与之对应的无隐层的神经网络,换言之,隐层无效。
先来一张图解决我对于一些概念上的疑惑
如图所示,定义:
则改节点的计算结果为:
φ(v)为激活函数。
如果激活函数φ(v)是线性函数,那么可以证明即使神经网络有隐层,也可以找到一个与之对应的无隐层的神经网络,换言之,隐层无效。