算法梳理
LongfeiZhou
热爱编程,喜欢阅读技术类文章。
展开
-
随机森林算法梳理
随机森林算法梳理目录随机森林算法梳理1. 集成学习概念2. 个体学习器概念3. boosting bagging3.1.1Boosting 的思想3.1.2Boosting的特点3.2.1Bagging的思想3.2.2Bagging的特点4. 结合策略(平均法,投票法,学习法)4.1平均法4.2投票法4.3学习法5. 随机森林思想6. ...原创 2019-03-01 21:17:29 · 497 阅读 · 0 评论 -
XGB算法梳理
目录1.CART树2.算法原理3.损失函数4.分裂节点算法5.正则化6.对缺失值的处理7.优缺点8.sklearn参数9.应用场景1.CART树CART算法流程:若满足停止分裂条件(样本个数小于预定阈值,或Gini指数小于预定阈值(样本基本属于同一类,或没有特征可供分裂),则停止分裂; 否则,选择最小Gini指数进行分裂; 递归执行1-2步...原创 2019-03-05 21:38:35 · 8643 阅读 · 0 评论 -
GBDT算法知识梳理
目录1.前向分布算法2.负梯度拟合3.损失函数4.回归5.二分类,多分类二元分类GBDT分类算法多元分类GBDT分类算法6.正则化7.优缺点8.sklearn参数8.1 GBDT类库boosting框架参数8.2 GBDT类库弱学习器CART参数调节9.应用场景参考1.前向分布算法前向分布算法是大多Boosting算法的一...原创 2019-03-03 21:51:10 · 725 阅读 · 0 评论