jieba分词

最新推荐文章于 2022-01-25 15:30:09 发布

小白太白

最新推荐文章于 2022-01-25 15:30:09 发布

阅读量59

点赞数

分类专栏： Python 文章标签： java 自然语言处理设计模式编程语言 nlp

本文链接：https://blog.csdn.net/qq_37194492/article/details/109639768

版权

Python 专栏收录该内容

23 篇文章 0 订阅

订阅专栏

简略示例

import jieba

#精确模式
#将句子最精确的切开，适合做文本分析
res = jieba.lcut('我开始学习jieba了')
print(res)
# ['我', '开始', '学习', 'jieba', '了']

#全模式
#把句子中所有可能成词的都扫描出来，但不能解决歧义
res = jieba.lcut('今天真是个好天气', cut_all=True)
print(res)
# ['今天', '天真', '真是', '个', '好', '天气']

#搜索引擎模式
#在精确搜素模式的基础上，对长词再次切分，提高召回率，适合用于搜索引擎分词
res = jieba.lcut_for_search('我们应该采取必要的行动才能解决问题')
print(res)
# ['我们', '应该', '采取', '必要', '的', '行动', '才能', '解决', '问题', '解决问题']