在Python中分词

使用jieba库进行分词

安装jieba库

在dos指令下输入：

pip install jieba -i https://pypi.tuna.tsinghua.edu.cn/simple

解释

• 使用jieba.cut函数分词
• cut_all指定分词的模式
  • True：全模式（可以拆分的词语都拆分开）
  • False：精确模式（不会重复拆分一个词语）
• 该函数返回的是一个可以迭代的对象

代码

import jieba
list1=list(jieba.cut("我终于考上了北京大学",cut_all=True))
list2=list(jieba.cut("我终于考上了北京大学",cut_all=False))
print(list1)
print(list2)

运行效果