机器学习小结
Payen_Cheung
努力转型中
展开
-
对数正态分布(Log-Normal Distribution)
2017.11.1 人要有发耻心和羞耻心,突然想到了这么一句话,MARK一个博客困惑了好久,还是写个博客Mark一下,方便以后查询使用概率密度函数局部期望- 相关分布快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl + Q插入链接 Ctrl + L插入代码 Ctrl + K插入图片 Ctrl + G提升标题 Ctrl原创 2017-11-01 16:02:07 · 125514 阅读 · 2 评论 -
决策树算法梳理
信息论基础熵 联合熵 条件熵 信息增益 基尼不纯度熵:(entropy)是表示随机变量不确定性的度量,如果一件事有nnn种可能结果,每种结果的概率为pi(i=1,2…,n)p_i(i=1,2…,n)pi(i=1,2…,n),那么熵表示为H=−∑i=1npilogpiH = -\sum _{i=1}^{n}p_ilogp_iH=−i=1∑npilogpi熵越大,随机变量的不确定性就越...原创 2019-03-05 11:46:41 · 574 阅读 · 0 评论 -
线性回归算法梳理
机器学习基础一1.机器学习的一些概念有监督 无监督 泛化 过(欠)拟合 交叉验证2.线性回归的原理3.线性回归损失函数、代价函数、目标函数4.优化方法梯度下降法牛顿法拟牛顿法5. 线性回归评估指标6.sklearn参数解释1.机器学习的一些概念有监督 无监督 泛化 过(欠)拟合 交叉验证1.有监督学学习 (Supervised learning) 即数据集有label,通过已有的一部分输入数...原创 2019-03-01 21:47:59 · 384 阅读 · 0 评论 -
逻辑回归算法梳理
逻辑回归与线性回归的联系与区别逻辑回归是一个非线性模型,sigmoid函数又称逻辑回归函数。线性回归要求变量服从正态分布,logistic回归对变量分布没有要求。线性回归要求因变量是连续性数值变量,logistic回归要求因变量是分类型变量。线性回归要求自变量和因变量呈线性关系,而logistic回归不要求自变量和因变量呈线性关系。线性回归中使用的是最小化平方误差损失函数,对偏离真实值越远...原创 2019-03-03 16:54:57 · 456 阅读 · 0 评论