补习一下机器学习回归问题----波士顿房价预测！

补习一下机器学习回归问题----波士顿房价预测！

这是一个回归问题，回归问题基本思路：

（1）线性回归

（2）多项式回归

（3）多元回归

（4）树回归

（5）集成学习：Boosting/Bagging

【知识补充】

一、特征选取

1.查看相关性：

2.选取相关性最高的特征：

3.特征归一化：

 

二、回归问题的评估指标

RMSE--比赛的评价指标

 

三、简单线性回归

训练集拟合

验证集评分：

测试集预测：

求RMSE：

 

四、随机森林模型

1.定义

随机森林：把很多决策树集成在一起。

决策树：

2.流程