【kaggle竞赛】Ames房价预测与回归问题（上）

2021.9.17 自学机器学习的日子，在图书馆摸了本《大数据与机器学习经典案例》 ， 记录一下。

第一章，讲讲房价预测和回归问题。

本文用到的是爱荷华州艾姆斯市房价数据集，由杜鲁门州立大学统计学教授DeCock整理，可移步公众号 当代巴别塔 回复【房价数据集】获取。

首先，我们将数据集保存于chapter1\dataset中。启动Jupyter Notebook，在chapter1目录下新建一个.ipy程序。
导入库：

import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as sns
from scipy import stats
from scipy.stats import norm
%matplotlib inline

现在我们读入训练集，并显示列变量名称。

df_train=pd.read_csv('./dataset/train.csv')
df_train.columns

这其中，列变量SalePrice代表房价，我们执行以下程序段并观察SalePrice的统计特征。
运行代码如下：

可以看到，50%房屋价格集中于16万美元左右，均价为18万美元，房价最小值大于0，标准差在可接受范围内，意味着SalePrice数据可用。

执行以下程序段，绘制SalePrice直方图，观察到SalePrice呈右偏正态分布，如图。

接下来计算一下峰度和偏度。

偏度值1.78进一步印证了SalePrice的右偏分布特征，峰度值5.50则显示SalePrice存在陡峭尖峰。

列变量GrLivArea表示居住面积，执行下列程序段，GrLivArea与SalePrice的关系如图所示。

可见，列变量GrLivArea与SalePrice密切相关，呈现近似线性关系。

列变量TotalBsmtSF表示地下室面积，执行下列程序段，得出TotalBsmtSF与SalePrice关系

列变量OverallQual 表示房屋装修质量，分为10个级别,用1~10表示，含义是:10表示特别好,9示非常好,8表示很好,7表示好，6表示高于平均水平,5表示平均水平4表示低于平均水平，3表示合格水平,2表示一般差，1表示非常差。执行程序段， 列变量OrvrllQual与SalePrice 的关系如图。