机器学习(周志华)学习笔记
沃·夏澈德
今天的明天是后天的昨天。----茨鲍勒·程德
展开
-
机器学习读书笔记----决策树
基本介绍 决策树是一类常见的机器学习方法。 举个简单的例子,我们分辨一个艺术品是否具有艺术价值,可以从色彩,线条两方面去评价(不会美术,只是打个比方)。 例如下面这幅画,我们可以先判断色彩不鲜艳,再判断线条不美观,从而得出这没有艺术价值。 这判断的过程就是一棵决策树。如图 这是决策树学习基本算法 可以看出,关键在第8行,我们要如何选取最优的划分属性呢,从上例来说为什么要先看...原创 2018-10-12 15:49:42 · 305 阅读 · 0 评论 -
机器学习学习笔记----神经网络
M-P神经元模型 上图表达了模型的思想,就是将输入信号通过带权重的连接传入神经元中,再经过激活函数,然后输出结果。 激活函数可以用符号函数,或者对数几率函数。 感知机与神经网络 感知机由两层神经元组成,而M-P模型就是它的输出层,显然感知机只有输出层有激活函数处理,可以认为只有一层是计算了的,输入层只是将数据输入,因此它的能力非常有限,无法解决异或问题。想解决非线性可分问题就要使用多层...原创 2018-10-14 14:57:51 · 315 阅读 · 0 评论 -
杂记----稳定基学习器与不稳定基学习器
稳定基学习器:线性学习器,支持向量机,朴素贝叶斯,k近邻学习器等。 这类基学习器对数据样本的扰动不敏感。 不稳定基学习器:决策树,神经网络等。 训练样本稍有变化都会造成明显的不同。...原创 2018-10-24 11:04:29 · 1760 阅读 · 0 评论 -
机器学习----误差逆传播算法(BP算法)中的参数更新估计式推导
关键思路就是,从要更新的参数一直影响到目标函数一路求偏导 采用西瓜书结构图举例 更新策略 逐层推导原创 2018-12-01 17:23:37 · 1850 阅读 · 0 评论