xgboost ppt(4)--总结

本文探讨了如何构建一个提升树分类器处理加权回归问题,其中每个实例都有其重要性权重。介绍了目标函数的定义以及在时间序列问题中,除了自顶向下分裂方法外的其他学习时间分隔策略,如自底向上和动态方法。总结强调了模型、目标函数和参数分离在理解和定制学习模型中的作用,以及在机器学习中平衡偏差和方差的重要性。
摘要由CSDN通过智能技术生成


1、我们如何来构造一个提升树分类器去做加权回归问题,这样每个实例都有一个有关重要性的权重

2、回到时间序列的这个问题,如果我想学习这个随着时间变化的阶跃函数,这里有其他的方法去学习时间分隔么,除了从上到下的分裂方法?


1、我们如何来构造一个提升树分类器去做加权回归问题,这样每个实例都有一个有关重要性的权重?

(1)定义一个目标函数,对没有加权重的版本计算g和h,将它用于上一步树学习算法中。

(2)再次考虑模型和目标函数的分离,理论怎么能够帮助更好的去组织这些机器学习工具呢?


对于时间序列的问题:

我们已经知道了结构分数的计算:

(1)从上到下贪婪

(2)从下到上贪婪,从独立的点开始,一步步向上融合

(3)动态的,能够找到最优


总结

1、模型、目标函数、参数的分离能够帮助我们理解并且定制学习模型。

2、偏差-方差的平衡无所不在

3、清晰理论,指导实践

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值