- 博客(2)
- 收藏
- 关注
原创 为什么感知机使用函数间隔作为损失函数(忽略1/||w||)
几何间隔相对于函数间隔的一个区别就是它不受参数(和)缩放影响,所以在SVM 这种优化目标是点到超平面之间的间隔的模型中,采用的是几何间隔。(如果采用函数间隔,学习过程会不断的产生更大的和,根本停不下来)但是感知机的目标是使误分类的点的个数为0,加不加对的正负判定毫无影响。相对的,采用几何间隔反而会使学习过程复杂化。推导如下:若忽略,参数的更新如下:若不...
2019-04-18 16:16:58
2078
2
转载 【转】 如何通俗的解释交叉熵与相对熵?
作者:CyberRep链接:https://www.zhihu.com/question/41252833/answer/195901726来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。讨论这个问题需要从香农的信息熵开始。小明在学校玩王者荣耀被发现了,爸爸被叫去开家长会,心里悲屈的很,就想法子惩罚小明。到家后,爸爸跟小明说:既然你犯错了,就要接受惩罚,但惩罚的程度就...
2018-03-28 15:47:34
265
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人