HMM的维特比算法的一个实际例子

本文通过将句子“我来到苏州”进行分词,详细介绍了HMM的维特比算法应用过程,包括任务定义、参数设置、算法图解及最优路径的确定,展示了如何使用HMM进行中文分词。
摘要由CSDN通过智能技术生成

HMM的维特比算法的一个实际例子

标签(空格分隔): 自然语言处理


用一个分词的HMM的例子做个解释

任务:

将“我来到苏州”分词

理想结果

【“我”,“来到”,“苏州”】

定义参数

要定义的参数主要有:状态参数、结果参数、初始化参数、转移概率、发射概率

  • 状态参数:这里就是每个字符的状态,我们采用简单的“BES“标记,如果一个字符作为一个词的开头则为B,如例子中的”来“,”苏“;如果一个字符作为一个词的结尾则为E,如例子中的”到“,”州“;如果一个字符作为一个单独词则为S,如例子中的”我“。所以状态参数为【”B“,“E”,“S”】

  • 结果参数

  • 初始化参数、就是在分词一开始的字符的状态参数:很明显不可能为E,因为E前边一定有B,所以我们可以统计海量语料中的第一个字符是作为单独词和词语的概率,用统计方法即可。在此,我们设计一个虚拟值:{”B“:0.6,“S”:0.4},也就是第一个字作为B的概率是0.6,第一个字作为单独词的概率是0.4。

  • 转移参数:就是上一个状态推导出下一个状态的概率,比如:已知上一个状态是”E“,则下一个字是”E“的概率是0.6,下一个状态是”S“的概率是0.4.所以我们设定转移参数是&#x

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值