ML机器学习
文章平均质量分 54
瞄代码的喵
小白学编程
展开
-
【西瓜书学习笔记】第8章:集成学习
课程前言: Hoeffding不等式: 是关于一组随机变量均值的概率不等式,如果为一组独立同分布的参数为p的伯努利分布随机变量,n为随机变量的个数 对任意Hoeffding 不等式可以表示为: 泰勒展开式: 当x0 = 0 时: 麦克劳林级数: 残差: 指实际观察值与估计值(拟合值)之间的差,利用残差所提供的信息,来考察模型假设的合理性及数据的可靠性称为...原创 2018-10-25 15:25:40 · 638 阅读 · 0 评论 -
【西瓜书学习笔记】第3章:线性模型
课程前言: arg max的参数是函数最大化的某个函数的域的点,与全局最大值相比参数函数的最大输出,arg max指的是函数输出尽可能大的输入或参数 闭式解: 给出任意自变量,就可以求出因变量 最小二乘法: 通过最小化误差的平方和寻找数据的最佳函数匹配 对微分得,, 如果非奇异,则有唯一解。 式(3.7) 分别对w,b求偏导,得: , ...原创 2018-11-15 14:22:07 · 371 阅读 · 0 评论 -
【西瓜书学习笔记】第4章:决策树
课程前言: 目的: 分类: 构造出一个模型,使得样本按照判定规则,可以从上往下,判断结果 每一条路径,都是一系列判定规则,决策树的假设空间,是所有分支的可能性,从假设空间中找到一个满足的路径,构建决策树 泛化能力强,即处理未知数据的决策树 基本流程: 如图4.2所示,重点在于如何从A中选择最优划分属性a 划分选择: 关键在于如何选择最优的属性进行划分?...原创 2018-12-03 18:37:38 · 448 阅读 · 0 评论