平方和误差函数--代价函数(机器学习)


线性回归有一个训练集,我们选择了线性回归,那么要如何选择合适的参量使得我们的预测更为准确呢??
在这里插入图片描述

引入

选择的依据

我们知道了现有的数据是准确的,那么预测就要以现有的数据为根基,尽量的贴合现有的数据,使得差距最小,怎么衡量这个差距呢???我们把 ∑ i = 1 i = m ( h ( x i ) − y i ) 2 \sum_{i=1}^{i=m}(h(x^i)-y^i)^2 i=1i=m(h(xi)yi)2

h ( x i ) h(x^i) h(xi)代表预测的第i个值, y i y^i yi代表实际的第i个值。
这个函数称为平方和误差函数,我们要想办法求得这个函数最小的 θ 0 \theta_0 θ0 θ 1 \theta_1 θ1
在这里插入图片描述

平均平方和误差

为了方便,我们又给出了平均平方和误差的概念
我们把 1 2 m ∑ i = 1 i = m ( h ( x i ) − y i ) 2 \frac{1}{2m}\sum_{i=1}^{i=m}(h(x^i)-y^i)^2 2m1i=1i=m(h(xi)yi)2称之为平均平方和误差,之所以是 1 2 m \frac{1}{2m} 2m1,是因为带了平方,后面要用梯度下降法,要求导,这样求导多出的乘2就和二分之一抵消了,一个简化后面计算的技巧

代价函数的定义

我们把 J ( θ 0 , θ 1 ) = 1 2 m ∑ i = 1 i = m ( h ( x i ) − y i ) 2 J(\theta_0,\theta_1)=\frac{1}{2m}\sum_{i=1}^{i=m}(h(x^i)-y^i)^2 J(θ0,θ1)=2m1i=1i=m(h(xi)yi)2称之为代价函数,我们求得就是使这个值最小的 θ 0 \theta_0 θ0 θ 1 \theta_1 θ1
在这里插入图片描述

相关概念

  • 13
    点赞
  • 25
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值