逆向最大匹配算法之python实现

本文介绍了在Python 3.6.4环境下,使用逆向最大匹配算法进行分词的实现过程。首先概述了算法思路,该思路与正向最大匹配类似。接着,文章提供了具体的代码实现,并展示了待分词文本‘zoo.txt’处理后的结果‘RMMResult.txt’。最后,给出了参考书籍‘Python自然语言处理实战 核心技术与算法’。
摘要由CSDN通过智能技术生成

1.运行环境
python 3.6.4
2.思路
大致思路与正向相同,可参考我的上一篇博客。
3.代码实现

import codecs

#获得分词字典,存储为字典形式
f1 = codecs.open('./corpus/WordList.txt', 'r', encoding='utf8')
dic = {}
while 1:
    line = f1.readline()
    if len(line) == 0:
        break
    term = line.strip() #去除字典两侧的换行符,避免最大分词长度出错
    dic[term] = 1
f1.
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值