nlp
guaniu_zsx
这个作者很懒,什么都没留下…
展开
-
常见深度学习激活函数及优缺点比较
常见深度学习激活函数及优缺点比较 1、什么是激活函数2、为什么要用3、都有什么激活函数4、sigmoid,Relu,softmax1. 什么是激活函数如下图,在神经元中,输入的 inputs 通过加权,求和后,还被作用了一个函数,这个函数就是激活函数 Activa...转载 2019-05-17 20:18:26 · 407 阅读 · 0 评论 -
常见机器学习损失函数(Loss Function)
常见机器学习损失函数(Loss Function) 损失函数(loss function)是用来估量模型的预测值f(x)与真实值Y的不一致程度,它是一个非负实值函数,通常使用L(Y, f(x))来表示,损失函数越小,模型的鲁棒性就越好。损失函数是经验风险函数的核心部分,也是结构风险函数重要组成部分。模型的结构风险函数包括了经验风险项和正则项,通常可以表示成如下式...转载 2019-05-17 21:04:42 · 3231 阅读 · 0 评论