频率派和贝叶斯派

频率派:他们认为世界是确定的。他们直接为事件本身建模,也就是说事件在多次重复实验中趋于一个稳定的值p,那么这个值就是该事件的概率。

\theta是未知的常量, x是随机分布的变量。

x_i\underset{\sim}{iid}p(x|\theta)

p(x|\theta)=\prod_{i=1}^Np(x_i|\theta)

MLE(极大似然估计,Maximum likelihood estimation):估计使p最大的\theta

\theta_{MLE} = arg\underset{\theta}{max}\log(p|\theta)

贝叶斯派:他们认为世界是不确定的,人们对世界先有一个预判,而后通过观测数据对这个预判做调整,我们的目标是要找到最优的描述这个世界的概率分布。

\theta是随机的变量\theta \sim \ p(\theta) 

贝叶斯定理:p(\theta|x) = \frac{p(x|\theta)p(\theta)}{p(x)}

MAP(最大后验估计,Maximum A posteriori) 

\theta_{MAP} = argmax\ p(\theta|x) = arg \underset{\theta}{max}\ p(x|\theta)p(\theta)

先验概率:在不知道事件是什么之前去预测事件是什么的概率

后验概率:知道了事件是什么了,去猜测事件发生的条件的概率。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值