机器学习
晴天码字
这个作者很懒,什么都没留下…
展开
-
随机森林_RF_算法梳理
集成学习:原创 2019-05-11 09:38:05 · 152 阅读 · 0 评论 -
XGB
算法思想就是不断地添加树,不断地进行特征分裂来生长一棵树,每次添加一个树,其实是学习一个新函数,去拟合上次预测的残差。当我们训练完成得到k棵树,我们要预测一个样本的分数,其实就是根据这个样本的特征,在每棵树中会落到对应的一个叶子节点,每个叶子节点就对应一个分数,最后只需要将每棵树对应的分数加起来就是该样本的预测值。 注:w_q(x)为叶子节点q的分数,f(x)为其中一棵回归树 如下图例子,训练出了...转载 2019-05-16 15:48:47 · 333 阅读 · 0 评论 -
Adaboost_GBDT_算法总结
前向分步算法 Adaboost算法模型是加法模型,损失函数是指数函数,学习算法是前向分步算法。Adaboost是二分类学习方法。原创 2019-05-13 10:01:40 · 116 阅读 · 0 评论