吴恩达 机器学习笔记二（lecture 2）（损失函数、梯度下降）

一、单变量的LR模型

 最简单的单变量线性回归模型：

二、损失函数（cost function）

在这个例子中使用的是平方误差函数最为损失函数，这是解决线性回归问题最常用的损失函数

1、假设函数和损失函数之间的关系

先考虑θ₀=0的情况：当θ₁ = 1时，损失函数取最小值

θ₀不知道时，两个参数，对应的损失函数的图像如下：是一个三维图像。与上面例子类似，都是找到损失函数值最小时候的参数值。