先验概率:根据以往经验和分析得到的概率;
后验概率:事情已经发生,这件事情的发生是由某个原因引起的可能性的大小。(果因概率,即在一个结果已经发生的条件下,可能是其中某一个原因造成的概率有多大。)
1)先验:根据统计历史上的经验、常识当下事件发生的概率;
2)似然:当下事件由果及因发生的概率;
3)后验:当下事件由因及果发生的概率。
举例理解(1):
先验——根据若干年的统计(经验)或者气候(常识),某地方下雨的概率;
似然——下雨(果)的时候有乌云(因/证据/观察的数据)的概率,即已经有了果,对证据发生的可能性描述;
后验——根据天上有乌云(原因或者证据/观察数据),下雨(结果)的概率。
先验概率可理解为统计概率,后验概率可理解为条件概率。
(2)用“瓜熟蒂落”这个因果例子,从概率的角度理解
先验概率,就是常识、经验所透露出的“因”的概率,即瓜熟的概率。
后验概率,就是在知道“果”之后,去推测“因”的概率,也就是说,如果已经知道瓜蒂脱落,那么瓜熟的概率是多少。
后验和先验的关系可以通过贝叶斯公式来求。也就是:P(瓜熟 | 已知蒂落)=P(瓜熟)×P(蒂落 | 瓜熟)/ P(蒂落)
似然函数,根据已知结果去推测固有性质的可能性,是对固有性质的拟合程度,所以不能称为概率。在这里就是说,不要管什么瓜熟的概率,只关心瓜熟与蒂落的关系。如果蒂落了,那么对瓜熟这一属性的拟合程度有多大。似然函数,一般写成L(瓜熟 | 已知蒂落),和后验概率非常像,区别在于似然函数把瓜熟看成一个肯定存在的属性,而后验概率把瓜熟看成一个随机变量。