范少良的博客

经典的线性回归指的是一元线性回归，但显然机器学习中的线性回归不仅仅是一元线性回归，还包括多元线性回归，因此这里的经典线性回归指的是使用最小二乘法求解的多元线性回归。

决策树篇是本系列阐述sklearn机器学习算法模型所涉及的第一个算法模型，sklearn中的决策树构造简单、运行高效、性能尚可、清晰可解释，是入门sklearn机器学习的最佳选择。

② 否则，按照的每个可能值，将D分为若干非空子集，将中实例个数最多的类别作为类标记，构建子结点，以结点和其他子结点构成T，并返回T。3）计算每个特征下的最优切分点，并比较在最优切分下的每个特征的基尼指数，选择基尼指数最小的那个特征，即最优特征；：生成过程中，对每个结点划分前进行估计，若当前结点的划分不能提升泛化能力，则停止划分，记当前结点为叶结点。① 若的信息增益比小于，则T为单结点树，记录D中实例个数最多的类别以此作为该结点的类标记，并返回T。为单结点树，记录实例类别，以此作为该结点的类标记，并返回。

机器学习的过程通俗来说是算法模型在迭代计算中获取到了输入数据和输出数据中的某种联系，并根据这种联系预测新的输入数据会产生怎样的输出数据。