dabokele的博客

原创 激励函数-Activation Funciton

一、什么是激励函数　　激励函数一般用于神经网络的层与层之间，上一层的输出通过激励函数的转换之后输入到下一层中。神经网络模型是非线性的，如果没有使用激励函数，那么每一层实际上都相当于矩阵相乘。经过非线性的激励函数作用，使得神经网络有了更多的表现力。　　为了更具体的描述这个问题，请参考知乎上的回答。 原文链接：https://www.zhihu.com/question/22334626/answe