sign函数(符号函数)
在logistic回归中,利用sigmoid函数实现,当x>0,y=1;当x<0时,y=0;
σ
(
x
)
=
1
1
+
e
x
\sigma(x) = \frac{1}{1+e^x}
σ(x)=1+ex1
tanh函数:
t
a
n
h
(
x
)
=
e
x
−
e
−
x
e
x
+
e
−
x
tanh(x)=\frac{e^x-e^{-x}}{e^x+e^{-x}}
tanh(x)=ex+e−xex−e−x
作图对比一下图像:
import numpy as np
import matplotlib.pyplot as plt
x=np.linspace(-10,10,100)
y1=1/(1+np.exp(-x))
y2=(np.exp(x)-np.exp(-x))/(np.exp(x)+np.exp(-x))
plt.plot(x,y1)
plt.plot(x,y2)
plt.grid(True)
plt.show()
sign函数是tanh函数的极限特例:
sign(x)或者Sign(x)叫做符号函数,在数学和计算机运算中,其功能是取某个数的符号(正或负):
当x>0,sign(x)=1;
当x=0,sign(x)=0;
当x<0, sign(x)=-1