机器学习分两派:
频率派---统计机器学习
贝叶斯派---概率图模型
GMM,HMM, CRF都是概率图模型
林轩田基石理论精彩,技法SVM精彩
张志华机器学习导论讲频率学派;统计机器学习讲贝叶斯数学
徐亦达:概率模型; github上notes很全面
两派都认为数据背后有一个概率分布
频率派:概率分布的参数Θ是一个常数,使用极大似然估计法求出
贝叶斯派:data背后概率分布的参数Θ也是一个概率分布,给出Θ的先验分布,获得data后计算Θ的后验分布,一般求MAP,即后验分布的最大值作为估计
频率学派最后都落到了优化问题上
贝叶斯学派最后都在求积分