瑞利分布概率密度函数推导_数学不好也能看懂的线性回归推导

本文详细介绍了线性回归中的基础知识,从一元线性回归出发,探讨了误差服从正态分布的性质。通过最大似然估计方法推导出求解最优参数w和b的过程,讲解了如何利用概率密度函数和对数似然函数来找到误差最小的解。此外,文章还提及了多元线性回归的正规方程解和梯度下降求解方式。
摘要由CSDN通过智能技术生成

对于线性回归最简单的就是一元线性回归,我们先拿一元线性回归作为入门的例子,等理解了这个,对于多元线性回归也就好理解了,都是一样的道理(对不起大家字写的不好!)

官方定义

百科的定义:线性回归是利用数理统计中回归分析,来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法,运用十分广泛。其表达形式为y = wx+b+e,e为误差服从均值为0的正态分布(此处我加上了偏置b,定义上是没有的,因为在最终的求解中我们需要求得b的解,所以是需要的。)。

一元线性函数:y = wx + b这个式子比较简单,相信大家在初高中都学过,就是由w、b控制二维空间中的一条直线.而y' = w'x + b' + e 就是我们根据样本数据拟合出来的一条直线,e为误差,实际上 y=y'.

一元线性回归推导

从误差着手:

a159d226a9f73a2e3889188ae486bb84.png

----1

式中ε为误差

由于误差服从正太分布(高斯分布),正太分布概率密度函数为:

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值