单变量线性回归

单变量线性回归的求解思路基于最小二乘法,假设我们有一批数据M,其中M是包含有一个自变量和其对应因变量的一系列数据点,一个数据点可以表示为s(Xi,Yi),则单变量线性回归要求解的公式为找到一条直线Y=AX+B,使得:

\frac{1}{2n}\sum_{i=1}^{n}\left ( Ypred-Ytrue \right )^{2}

最小,上式也称为线性回归的损失函数。

拟合的直线通常有两个参数,我们通过最小二乘法写成的损失函数可以通过对参数1和参数2求偏导,根据梯度下降法来对其进行更新。

\ddot{\theta 1}=\frac{1}{m}\sum_{i=1}^{n}(Ypred-Ytrue)*X

\ddot{\theta 2}=\frac{1}{m}\sum_{i=1}^{n}(Ypred-Ytrue)

\theta 1 =\theta 1 -\alpha \ddot{\theta 1}

\theta 2 =\theta 2 -\alpha \ddot{\theta 2}

通过对此迭代就可以是损失函数最小的两个参数。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值