真实值:$y=\theta ^{T}x+\varepsilon $
预测值:$\hat{y}=\theta ^{T}x $
$\varepsilon
为
误
差
项
,
服
从
均
值
为
0
,
方
差
为
为误差项,服从均值为0,方差为
为误差项,服从均值为0,方差为\sigma^{2}$的高斯分布。
已知若干样本,可以得到若干$\varepsilon
值
,
根
据
极
大
似
然
估
计
求
得
参
数
值,根据极大似然估计求得参数
值,根据极大似然估计求得参数\theta$。
θ
\theta
θ的似然函数
L
(
θ
)
=
∏
i
=
1
m
p
(
ε
i
;
θ
)
L(\theta )=\prod_{i=1}^{m}p(\varepsilon _{i};\theta)
L(θ)=∏i=1mp(εi;θ),然后求使得似然函数最大时的
θ
\theta
θ值即可。