机器学习 - 线性模型

一．线性回归—LR

线性回归是一种监督学习下的线性模型，线性回归试图从给定数据集中学习一个线性模型来较好的预测输出（可视为：新来一个不属于D的数据，我们只知道他的x，要求预测y，D如下表示）。

首先我们还是给定数据集的严格表示（我们这里直接讲多维的线性回归）：

即是线性模型，那么我们容易给出目标函数：

用向量的方式来表示目标函数，其中目标函数产生的结果即是我们的输出：

为了便于后文分析，我们将d归并到w中：