个人笔记

第五章 隐含马尔可夫模型
1 通信模型
通信的本质是一个编解码和传输的过程。
典型的通信系统：

包含雅格布森通信的六个要素：发送者（信息源），信道，接收者，信息，上下文和编码。
其中S1,S2,S3，… 表示信息源发出的信号，比如手机。O1,O2,O3，…是接收器接收到的信号。通信中的解码就是根据接收到的信号O1,O2,O3,…还原出发送的信号S1,S2,S3,…。
在通信中，如何实现上面的解码呢？只需要从所有的源信号中找到最可能产生出观测信号的那一个信息。用概率论表述：就是在已知O1,O2,O3,…的情况下，求得令条件概率P(S1,S2,S3,…丨O1,O2,O3,…)达到最大值的那个信息

用贝叶斯将上式变成

分子第一个表示信息S1,S2,S3,…在传输后变成接收信号O1,O2,O3,…的可能性；第二个表示S1,S2,S3,…本身是一个在接收端正常的信号的可能性；分母表示发送端产生信息O1,O2,O3,…的可能性。其中，P(O1,O2,O3,…)是可以忽略的常数。等价于求分子：

分子可以用隐含马尔可夫模型来估计