- 博客(2)
- 收藏
- 关注
原创 从决策树到GBDT & Xgboost(二)
CART分类与回归树(classification and regression tree)既可以用在分类,也可用在回归,是在给定输入随机变量XXX条件下输出随机变量YYY的条件概率分布的学习方法。同样的,CART需要生成和剪枝(pruning)。1.CART是二叉树,每个非叶子节点都有两个孩子。等于递归地构建二叉决策树。可用作回归或分类。2.对回归树,用平方误差最小化,对分类树,...
2018-03-22 16:20:50 209
原创 从决策树到GBDT & Xgboost(一)
最近,刚尝试了 kaggle,对 tree-based model 有了兴趣,发现这一类算法不仅在kaggle上广受好评,而且具有可解释性强、原理相对通俗易懂,而且经常和集成学习等结合,常常能发挥出优秀的效果。1. 决策树 (Decision Tree)如果你学习了数据结构,tree这个结构想必你不会陌生,无疑是最重要的数据结构之一,决策树其实也不过是类似的结构:对于一棵已经训练好的树...
2018-03-21 11:05:50 484
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人