- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 【机器学习】XGBoost 原理及调参指南 整理
XGBoostXGBoost能自动利用cpu的多线程,而且适当改进了gradient boosting,加了剪枝,控制了模型的复杂程度 传统GBDT以CART作为基分类器,特指梯度提升决策树算法,而XGBoost还支持线性分类器(gblinear),这个时候XGBoost相当于带L1和L2正则化项的逻辑斯蒂回归(分类问题)或者线性回归(回归问题)。 传统GBDT在优化时只用到一...
2018-05-31 17:59:05 4169
原创 【机器学习】组合算法 Bootstraping, Bagging, Boosting, AdaBoost, RandomForest, Gradient boosting
组合模型Bootstraping名字来自成语“pull up by your own bootstraps”,意思就是依靠你自己的资源,称为自助法,它是一种有放回的抽样方法,它是非参数统计中一种重要的估计统计量方差进而进行区间估计的统计方法。其核心思想和基本步骤如下:采用重抽样技术从原始样本中抽取一定数量(自定义)的样本,此过程允许重复抽样。根据抽出的样本计算给定的统计量T。重复...
2018-05-16 14:17:51 1946
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人