机器学习
文章平均质量分 78
我们敬爱的老豆
专心科研 希望一切如我所想
展开
-
Logistic regression中使用极大似然参数估计目标函数的数学原理
众所周知逻辑回归(Logistic regression)是用来解决二分类的问题的,本身是由回归问题演变而来。逻辑回归问题中使用sigmoid函数将模型的输出y映射到[0,1]之间,即y的取值为0或1,sigmoid函数如下: 分类问题问题转化为: ...原创 2018-10-26 23:10:11 · 2569 阅读 · 0 评论 -
支持向量机(SVM)的理解
支持向量机的由感知机发展而来的,学习SVM的时候,要先学习感知机的思想,感知机也是神经网络的基础。支持向量机实践代码:http://sklearn.apachecn.org/cn/0.19.0/modules/svm.html#svm-mathematical-formulation1、SVM中的函数间隔(function margin)与几何间隔(geometrical margin):...原创 2018-11-07 16:17:04 · 455 阅读 · 0 评论 -
KKT(Karush-Kuhn-Tucher)条件理解
KKT条件主要涉及凸优化问题,学习SVM的时候求解拉格朗日函数的对偶问题时,需要使用KKT条件来得到最终的。1、对于无约束问题(unconstrained minimization): 1) 一阶必要条件为: ...原创 2018-11-11 20:26:38 · 2945 阅读 · 0 评论 -
决策树ID3算法原理及源码解析
>>>>>>>>>>>>>>>Sklearn虽然很好用,但是调包侠是没有出路的>>>>>>>>>>>>>>原创 2018-11-20 22:55:44 · 1860 阅读 · 1 评论