分词

分词

import jieba

cut_all=True 为全模式     cut_all=False为精确模式

result = jieba.lcut('他来到上海交通大学',cut_all=True)    #全模式
print(result)
['他', '来到', '上海', '上海交通大学', '交通', '大学']

result1 = jieba.lcut('他来到上海交通大学',cut_all=False)    #精确模式
print(result1)
['他', '来到', '上海交通大学']

text1 = '无妻徒刑,厉害炸了，卷积神经网络'
seg_list1 = jieba.cut(text1,cut_all=False)  #精确模式
print('/'.join(seg_list1))
无妻徒刑/,/厉害/炸/了/，/卷积/神经网络


jieba.load_userdict('text.txt')    #创建一个txt文件，将text1词组写进txt文件，可以将分开的词语组合，不可分开
seg_list1 = jieba.cut(text1,cut_all=False)  #精确模式
print('/'.join(seg_list1))
无妻徒刑/,/厉害炸了/，/卷积/神经网络  #把厉害炸了写进了txt文件就把厉害炸了组合起来