李航 《统计学习方法》习题8.1

解题:

因为题中假设弱分类器为决策树,可采用CART二叉分类树。

1、初始化数据权值分布:

D =  (w11, w12, ..., w110) = (0.1,0.1, ..., 0.1)

w1i  =0.1 ,i = 1,2,....,10

2、计算各特征的基尼系数(为计算方便,就取深度为1 的树):

根据基尼系数的计算公式:

求得:

gini(D,潜力=2)的基尼系数最小,所以第一个选潜力等于2 和非2 为划分点。

3、计算误差率,分类器的权重,更新的权重:

根据上面的划分可以知道3,6,8被误分类

则计算如下:

4、如此循环往复的重复步骤2,3,直到你的分类器上的误差为0 ,或者低于你的阈值的时候,就可以停止了。

ps:计算的正确性,请自行计算。我也不知道我计算正确没有。但是公式步骤是正确的

  • 8
    点赞
  • 76
    收藏
    觉得还不错? 一键收藏
  • 16
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 16
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值