模型选择

1.引言

1.1模型

在这里插入图片描述

1.2 机器学习

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.模型选择的相关定理和原则

在这里插入图片描述

2.1没有免费的午餐定理(No Free Lunch,NFL)

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.2 丑小鸭定理(Ugly Ducking)

在这里插入图片描述

2.3 Occam剃刀原理(Occam’s Razor)

在这里插入图片描述
在这里插入图片描述

2.4 最小描述长度原理(Minimum Description Length,MDL)

在这里插入图片描述

3.模型选择的评价标准

在这里插入图片描述

3.1 统计检验方法

在这里插入图片描述

3.2 操作接收者特征曲线ROC

在这里插入图片描述
假设正类预测为正类数为TP
负类预测为负类TN
真阳性率=准确率=TP/TP+负类预测为正类
假阳性率=TN/TN+正类预测为负类

3.2 模型复杂度

在这里插入图片描述
在这里插入图片描述

4.分类器设计中的重采样技术

在这里插入图片描述

4.1 刀切法(Jackknife)-1949年Quenouille提出

在这里插入图片描述

4.2 自助法(Bootstrap)

在这里插入图片描述

4.3 保持方法(Holdout)

在这里插入图片描述

4.4 交叉验证(cross-validation)

在这里插入图片描述
在这里插入图片描述

5. 分类器集成概述

在这里插入图片描述
在这里插入图片描述

5.1 集成学习的有效条件

在这里插入图片描述

5.2集成学习的常用技术手段

在这里插入图片描述

5.3 分类器集成算法分类

在这里插入图片描述
在这里插入图片描述

6.Stacked Generalization(层叠泛化)

在这里插入图片描述
在这里插入图片描述

7.Bagging(装袋)

在这里插入图片描述
在这里插入图片描述

8.随机子空间

在这里插入图片描述
在这里插入图片描述

9. Adaboost

在这里插入图片描述

9.1 发展历程

在这里插入图片描述
在这里插入图片描述

9.2 处理分类问题的思想

在这里插入图片描述
在这里插入图片描述

9.3 Adaboost算法

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
有点像softmax。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

9.4 Adaboost例子

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

9.5 理论解释

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值