激活函数作用

激活函数在机器学习和深度学习中起着至关重要的作用,它们将权值结果转化为分类输出。Sigmoid用于二分类问题,其输出值在0到1之间,适合概率解释。Softmax用于多分类,同样将输出映射到概率分布。ReLU因其简单和防止梯度消失而受到青睐,特别是在深层网络中。不同的激活函数如tanh、Log-sigmoid和tansig在不同场景下各有优势,如线性关系、非线性关系或阈值判断。在BP神经网络中,sigmoid和线性函数的组合常见于不同层。
摘要由CSDN通过智能技术生成

激活函数作用:

将权值结果转化成分类结果。常用于

  • 逻辑回归(Logistic Regression)
  • 神经网络(Neural Network)
    这两处,激活函数都用于计算一个线性函数的结果。
  • sigmoid函数  : 

在机器学习中可用在分类问题上,如逻辑回归模型分类器,将输出值映射到(0,1)

总和为1,可以从概率角度理解,则输出时选择值最大的(概率最大)作为预测值

     

 

Sigmoid函数的导数是其本身的函数,即 f ′ (x)=f(x) (1−f(x) )

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值