ML
pengwill97
C.S Master
展开
-
【Machine Learining】Ch2. 模型评估与选择
第2章 模型评估与选择2.1 经验误差与过拟合错误率:分类错误的样本数占总样本数的比例精度:1-错误率过拟合:学习器把训练样本学的太好,甚至把训练样本的特点当做了潜在样本的一般性质,导致泛化性能下降的现象。引起过拟合的因素一般是学习能力太过强大。欠拟合:对训练样本的一般性质没有学习好。引起欠拟合的因素一般是学习能力低下。对候选模型的评估方法,对泛化误差进行评估,并选取泛化误差的最小...原创 2019-01-14 21:42:29 · 463 阅读 · 0 评论 -
【Machine Learning】机器学习中的性能度量
机器学习中的性能度量在前面中的的小节中有如下的两个性能度量错误率:分类错误的样本数占总样本数的比例精度:1-错误率通常情况下,单单使用这两个性能度量,不能很好的反应模型的训练结果。所以需要借助其他指标来评价模型的好坏。均方误差、错误率与精度在回归模型中,常用的性能度量是均方误差(mean squared error)E(f;d)=1m(f(xi)−yi)2E(f;d) = \fr...原创 2019-01-16 23:48:21 · 695 阅读 · 0 评论 -
【Machine Learning】Ch3.2 线性回归
3.2 线性回归线性回归的目的是,给定数据集D={(x1,y1),(x2,y2)...(xm,ym)}D=\{(x_1,y_1),(x_2,y_2)...(x_m,y_m)\}D={(x1,y1),(x2,y2)...(xm,ym)},其中xi=(xi1;xi2;...;xid)x_i=(x_{i1};x_{i2};...;x_{id})xi=(xi1;xi2;......原创 2019-02-21 22:29:46 · 277 阅读 · 0 评论 -
[李宏毅 机器学习] 2.误差来源
文章目录思维导图数理统计中的方差和偏差估计均值$\mu$估计方差$\sigma^2$为什么会有这样的结果对于均值的估计偏差对于方差估计偏差话说回来模型的方差和偏差模型的方差模型的偏差模型诊断判断调整模型选择划分验证集N折交叉验证思维导图系统的误差来自两个方面,Bias和Variance数理统计中的方差和偏差当我们需要随机变量xxx所服从的总体分布的均值和方差的时候,有不同的估计方法。然而...原创 2019-07-30 21:35:15 · 521 阅读 · 0 评论 -
[李宏毅 机器学习] 3. 梯度下降
文章目录思维导图回顾Tip1: 调整学习速率AdagradTip2: 随机梯度下降Tip3: 特征缩放标准化梯度下降的数学原理泰勒展开思维导图回顾在Step3中,我们需要根据loss function,对参数θ\thetaθ进行优化,使用到的方法就是梯度下降算法。可以用如下的函数表示。θ∗=argminθL(θ)\theta^{*}=\arg \min _{\theta} L(\t...原创 2019-07-30 21:37:01 · 222 阅读 · 0 评论 -
[李宏毅 机器学习] 1.线性回归
思维导图原创 2019-07-30 21:39:58 · 355 阅读 · 2 评论