空说两句
gbdt和xgboost有什么不同
答:主要2点
1 gbdt的决策树划分标的是mae,xgboost是自己那套
2 xgboost引入了正则
除此之外,基本上没什么不同
二者的核心点是相同的,都是模拟泰勒公式的二阶展开后的f(x),所以两者的模拟对象是相似的,都是 loss(y,f(x-1))的负一导除以二导,你以为gbdt真的是在模拟负梯度?幼稚,只是1/2(y-f(x))^2的负一导除以二导正好等于负梯度而已
2020-03-28
最新推荐文章于 2020-06-09 08:51:30 发布