人工智能100问 - 3极大似然法是什么?与最小二乘的区别?

这篇博客介绍了极大似然估计的概念,通过一个箱子里取球的例子阐述了如何计算极大似然估计,并与最小二乘法进行了区别分析,指出在高斯分布假设下两者等价。
摘要由CSDN通过智能技术生成

我们用机器学习做模型,需要确定模型的各个参数。模型实际的参数我们是无从得知的,我们只能尽最大可能对这些参数进行估计,极大似然法就是使用最广泛的估计方法之一。

一、什么是极大似然?

极大似然估计从字面上来理解可以拆成三个词,分别是“极大”、“似然”、“估计”,分别的意思如下:
极大:最大的概率
似然:看起来是这个样子的
估计:就是这个样子的
连起来就是,最大的概率看起来是这个样子的那就是这个样子的。怎么样,是不是很朴素?

极大似然法(the Principle of Maximum Likelihood)是由高斯和费希尔先后提出的,这个方法的基础是极大似然原理。
极大似然法的原理是:样本所展现的状态就是所有可能状态中出现概率最大的那个状态。

二、举个栗子

三、怎么计算?

极大似然的计算简单来说可以分为3步:
(1)写出似然函数;
(2)求导数;
(3)导数为0,解方程。

以从箱子里取出小球为例子:箱子里有一定数量的小球,每次随机拿一个球,查看颜色后放回,已知拿到白

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值