自然语言处理
nannanxiami
这个作者很懒,什么都没留下…
展开
-
建立一个与词性标注问题相关联的HMM模型
如何建立一个与词性标注问题相关联的HMM模型?1.必须确定HMM模型中的隐藏状态和观察符号,也可以说成观察状态,由于我们是根据输入句子输出词性序列,因此可以将词性标记序列作为隐藏状态,而把句子中的单词作为观察符号,那么对于Brown语料库来说,就有87个隐藏状态(标记集)和将近4万多个观察符号(词型)2。训练语料库的性质来学习HMM的各项参数A. 如果训练语料已经做好了标注,那么学习这个HMM模型...转载 2018-03-03 00:17:28 · 426 阅读 · 0 评论 -
HMM在自然语言处理中的应用一:词性标注
隐马尔科夫模型(HMM)的三大基本问题与解决方案包括1. 对于一个观察序列匹配最可能的系统——评估,使用前向算法(forward algorithm)解决;2. 对于已生成的一个观察序列,确定最可能的隐藏状态序列——解码,使用维特比算法(Viterbi algorithm)解决;3. 对于已生成的观察序列,决定最可能的模型参数——学习,使用前向-后向算法(forward-backward algo...转载 2018-03-03 00:30:54 · 687 阅读 · 0 评论