整体思路:1.通过创建模型创建出一组回归系数偏置(y=ax+。。。)然后与真实值进行损失函数处理,然后再利用两种损失函数的优化方法进行优化,达到最优解
1.
w是回归系数(又叫权重),b偏置
假定特征值和目标值满足函数关系(线性模型),最后找到w和b从而满足关系
线性模型:包括线性和非线性两种
只要满足自变量一次或者参数一次都可以是线性模型
2.线性回归的损失和优化原理
为了求出损失函数最小,从而得到线性模型参数,所以优化算法
3.优化算法
3.1)正规方程
3.2)梯度下降
阿尔法是步长,右边的是方向
理解:逐渐迭代到最优解