学习笔记 Data Science for Business 第三章 《预测建模：从关联到监督式分段》

Introduction to predictive modelling: from correlation to supervised segmentation 预测建模：从关联到监督式分段

上一章谈到了数据挖掘的概念，以及建模的一般性流程等概念。本章要深入讨论数据挖掘的一个主要的课题：预测建模。本章继续沿用了“电信公司MegaTelCo的客户流失的预测”这个例子来讲解如何从众多的客户数据当中，将那些没有流失的客户与流失的客户分段（segementation）。通过对已有数据的分段，我们可以知道未来某个客户是否会流失，如果有可能会流失，我们就能够采取措施来争取留住这个客户。同样的分析办法可以用在信用卡违约或者信贷违约等具体的商业应用中。

在介绍监督式分段的过程中，作者介绍了数据挖掘的一个最基本的工作内容：如何挑选出“信息含量”最高的特征或变量（variable）来对众多的数据进行分段。

模型、归纳以及预测

本节首先介绍了何谓“模型”，以地图、建筑师的设计蓝图来介绍模型的作用。在“数据科学”领域，一个预测性的模型是用来对感兴趣的未知变量（目标变量）的值进行预测。本节介绍了一些基本的数据库和统计学的概念，如“特征矢量”，“样本空间”，“实例”等。

监督式分段

1. 挑选“信息含量高的”变量

这里作者引入了“熵”的概念。用熵来定义某个数据集的“混乱”程度。以债务违约的预测为例，在一个数据集中，有违约的客户，也有不违约的客户。每个客户都具有唯一的一组特征矢量。这样，根据某个特征来对数据集中的客户进行分段