用R语言绘制Sigmoid函数——归一化与调参

用R语言绘制Sigmoid函数——归一化与调参

在数据预处理时需要进行归一化的操作,而由于数据本身的性质不同,如何选择适合的归一化方法,以及在运用sigmoid时如果调整系数:

  • 常见归一化函数
  • Sigmoid函数可视化-R
  • 不同系数下的Sigmoid

常见归一化函数

  • min-max标准化 (Min-max normalization)

    x=xminmaxmin
  • 0
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
激活函数的三个基本作用是: 1. 引入非线性变换:激活函数能够将输入信号进行非线性变换,使得神经网络可以学习和表示更加复杂的关系和模式。 2. 控制输出范围:激活函数能够控制神经元的输出范围,将输出值映射到一定的范围内,使得神经网络的输出更加稳定和可控。 3. 提高计算效率:激活函数能够提高神经网络的计算效率,使用一些易于计算的激活函数可以简化模型计算过程,加速模型训练和预测。 以下是几类常见的激活函数图: 1. Sigmoid函数:将输入值映射到0~1之间,具有典型的S形曲线。 ![sigmoid函数](https://img-blog.csdn.net/20170525140250678?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdTAxNjU2NjQ2Mg==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/q/70) 2. ReLU函数:对于输入值大于0的部分输出原值,小于0的部分输出0,具有线性和非线性特性。 ![ReLU函数](https://img-blog.csdn.net/20170525140301070?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdTAxNjU2NjQ2Mg==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/q/70) 3. Tanh函数:将输入值映射到-1~1之间,具有类似sigmoid函数的S形曲线。 ![tanh函数](https://img-blog.csdn.net/20170525140311333?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdTAxNjU2NjQ2Mg==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/q/70) 4. Softmax函数:将输入值进行归一化,使得所有输出值之和为1,常用于多分类问题的输出层。 ![softmax函数](https://img-blog.csdn.net/20170525140321531?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdTAxNjU2NjQ2Mg==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/q/70)

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值