深度学习中的激活函数

参考:
The Activation in Deep Learning 浅谈深度学习中的激活函数

1. Sigmoid:

f(x)=11+exf(x) = \frac{1}{1+e^{-x}}

Sigmoid 函数

2. Tanh:

f(x)=1e2x1+e2xf(x) = \frac{1-e^{-2x}}{1+e^{-2x}}

Tanh 函数

3. ReLU:

f(x)={0(x0)x(x>0) f(x) = \begin{cases} 0 & (x \leq 0)\\ x & (x > 0) \\ \end{cases}

ReLU 函数

©️2020 CSDN 皮肤主题: 技术黑板 设计师: CSDN官方博客 返回首页
实付0元
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值