深度学习之激活函数的介绍和比较：sigmoid，tanh，relu，softmax

本文参考自3个博客，整理合并而成。

1.https://blog.csdn.net/haxiongha/article/details/79404304

2.https://blog.csdn.net/u011684265/article/details/78039280

3.https://www.cnblogs.com/gezhuangzhuang/p/10583394.html

目录

1. 什么是激活函数

2. 为什么要用激活函数 

3. 都有什么激活函数

4. 如何选择

---

---

1. 什么是激活函数

如下图，在神经元中，输入inputs通过加权、求和后，还被作用了一个函数——激活函数Activation Function。

                                                

2. 为什么要用激活函数