支持向量机(svm)推导过程

该支持向量机(SVM)推导过程主要是参考李航老师《统计学习方法》,结合一些个人的理解,得到最后的结果。其中包括了约束、KKT的理解。

2017-03-25 12:52:06

阅读数 289

评论数 0

浅谈分类中差异性(距离)

问题一:从实际问题出发 现实生活中,我们往往能够找到很多分类的例子。假设某个疾病只跟k个因素有关,那么我们通过获取病人这k个因素的数据和不生病人k个因素的取值,可以建立起一个判别函数。当我们有一个检测样本进来的时候,我们通过k个因素的取值和检测函数就能最终判别出该样本的情况。   问题二:数据属性...

2017-03-13 11:31:18

阅读数 322

评论数 0

softmax的简单推导和python实现

首先,我们来看看对于softmax的推导过程:    我们可以对softmax算法进行数学上的推导,在推导的过程我们可以发现其过程类似于之前我们所熟悉的logitic算法,softmax相当于是logitic的一个范化。当我们推导到最后一步的时候,为了在已知输出模型的基础上找到最优的参数s...

2017-03-12 22:16:41

阅读数 2499

评论数 2

主成分分析(PCA)算法的简单推导和实例

问题1:为什么要降维?    我们在处理实际问题的时候,进行特征提取过程中,提取的特征维数太多经常会导致特征匹配时过于复杂,消耗计算资源。   问题2:降维的方法有哪些? 特征降维一般分为两类:特征提取和特征抽取。特征选择就是简单的从高纬度的特征中选择其中一个子集来作为新的特征。特征抽取是将高纬度...

2017-03-10 13:49:31

阅读数 13039

评论数 1

python环境下Xgboost的安装过程

我们知道xgboost是一款非常有用的算法,但是像Anaconda也并不会帮我们安装上该包,所以需要我们自己进行安装。 1、首先,你电脑上需要安装Anaconda,该软件集成了很多我们用得到的工具包,所以很推荐安装。 2、下载xgboost-master.zip 地址http://downlo...

2017-03-10 13:29:25

阅读数 215

评论数 0

浅谈线性回归

浅谈线性回归解决的问题,以及自己的学习经历

2017-03-09 08:59:02

阅读数 340

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭