线性回归的Cost function实现

最新推荐文章于 2022-09-30 17:36:00 发布

清，纯一色

最新推荐文章于 2022-09-30 17:36:00 发布

阅读量432

点赞数

文章标签：数据结构与算法操作系统

原文链接：http://www.cnblogs.com/sunnystone85/p/10029855.html

版权

此处使用Octave来实现

线性方程的代价函数： $\small h(x) = \theta_0 + \theta_1X$

代价函数：

$\small J(\theta_0, \theta_1)=\frac{1}{2m}\sum_{i=1}^{m}(h(X^{(i)})-y^{(i)})^{2}$

X 是测试值，假设用矩阵表示为 $\small \begin{bmatrix} 0.3 \\ 0.25 \\ 0.4 \\ 0.2 \end{bmatrix}$ 为了方便用矩阵计算我们把X加一列 1 : $\small \begin{bmatrix} 1& 0.3 \\ 1 & 0.25 \\ 1 &0.4 \\ 1& 0.2 \end{bmatrix}$ 同时 $\small \theta = \begin{bmatrix} \theta_0 \\ \theta_1 \end{bmatrix}$

那么h(X)的合就可以用矩阵乘法来计算 $\small X * \theta = \begin{bmatrix} 1& 0.3 \\ 1 & 0.25 \\ 1 &0.4 \\ 1& 0.2 \end{bmatrix} * \begin{bmatrix} \theta_0 \\ \theta_1 \end{bmatrix} = \begin{bmatrix} 1*\theta_0+0.3*\theta_1 \\ 1*\theta_0+0.25*\theta_1 \\ 1*\theta_0+0.4*\theta_1 \\ 1*\theta_0+0.2*\theta_1 \end{bmatrix}$

平方就可以用 y' * y, 因为要平方之后把所有向量内的项加到一起，原理就是每一项跟自己相乘然后相加到一起还是矩阵相乘。

最后代价函数J就可以表示为： $\small ((X * \theta - y)'*(X * \theta - y))/(2m)$

转载于:https://www.cnblogs.com/sunnystone85/p/10029855.html

清，纯一色

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
线性回归的Cost function实现

此处使用Octave来实现线性方程的代价函数：代价函数：X 是测试值，假设用矩阵表示为为了方便用矩阵计算我们把X加一列 1 : 同时那么h(X)的合就可以用矩阵乘法来计算平方就可以用 y' * y, 因为要平方之后把所有向量内的项加到一起，原理就是每一项跟自己相乘然后相加到一起还是矩阵相乘。...
复制链接

扫一扫

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。