机器学习
不安的前方
这个作者很懒,什么都没留下…
展开
-
机器学习线性回归总结
最近重新回顾了一下机器学习的算法,把以前学过的再看一遍,然后整理总结在博客上。这次总结一下线性回归,参考书籍为周志华老师的西瓜书。1、简述线性回归线性回归顾名思义线性即线性关系,表示两个变量之间存在一次方函数关系 (参考百度百科);回归是一种统计分析的方式,直观的看就是寻找属性和结果之间的映射(函数)。接下来探讨一下常用的线性回归(在连续变量下)2、一元线性回归考虑一种最简单的情况:输入的...原创 2019-06-07 00:05:15 · 1040 阅读 · 0 评论 -
逻辑回归(logistics regression)
逻辑回归是一种广义的线性回归模型,它通过一个单调可微的函数将结果标签和线性回归预测值联系起来,在西瓜书中开头便介绍了单位阶跃函数f(x)={0=z<00.5=z=01=z<0 f(x)=\left\{\begin{aligned}0 & = & z<0\\0.5 & = & z=0 \...原创 2019-06-07 15:07:41 · 585 阅读 · 0 评论 -
决策树(Decision Tree)
决策树是一种采用分而治之思想的算法,举个例子:假设样本有4个属性,标签有两类。首先我们通过算法找到一个属性,那么现在问题被分解为两个子问题:只有一个属性的问题和三个属性的问题,我们先解决了前者,再处理后者。如此反复,最终解决整个问题,从而得到了整个决策树。在展开决策树的讨论前,我们先对符号进行定义:样本集S、属性数k、标签分类种数(v分类问题)v。1、ID3ID3决策树对属性进行划分的标准是...原创 2019-06-10 15:13:11 · 304 阅读 · 0 评论