故地重游之最大似然估计
首先从贝叶斯公式开始:
给定某些样本D,在这些样本中计算某结论A1,A2…An出现的概率,即P(Ai|D),若求maxP(Ai|D),则有以下式子:
– 当样本给定时,P(D)是常数,可以忽略
m a x P ( A i ∣ D ) = m a x P ( D ∣ A i ) P ( A i ) P ( D ) = m a x ( P ( D ∣ A i ) P ( A i ) ) maxP(A_i|D)=max\frac{P(D|A_i)P(A_i)}{P(D)}=max(P(D|A_i)P(A_i)) maxP(Ai∣D)=maxP(D)P(D∣Ai)P(Ai)=max(P(D∣Ai)P(Ai))
– 若A1,A2,…An的先验概率相等(或者近似),则得到以下结论:
m a x P ( A i ∣ D ) → m a x