python用jieba对文本就行分词并统计词频_python jieba分词并统计词频后输出结果到Excel和txt文档方法...

前两天，班上同学写论文，需要将很多篇论文题目按照中文的习惯分词并统计每个词出现的频率。

让我帮她实现这个功能，我在网上查了之后发现jieba这个库还挺不错的。

运行环境：

安装jieba：pip install jieba

安装xlwt：pip install xlwt

具体代码如下：

#!/usr/bin/python

# -*- coding:utf-8 -*-

import sys

reload(sys)

sys.setdefaultencoding('utf-8')

import jieba

import jieba.analyse

import xlwt #写入Excel表的库

if __name__=="__main__":

wbk = xlwt.Workbook(encoding = 'ascii')

sheet = wbk.add_sheet("wordCount")#Excel单元格名字

word_lst = []

key_list=[]

for line in open('1.txt'):#1.txt是需要分词统计的文档

item = line.strip('\n\r').split('\t') #制表格切分

# print item

tags = jieba.analyse.extract_tags(item[0]) #jieba分词

for t in tags:

word_lst.append(t)

word_dict= {}

with ope