文本词频统计

代码挺简单的,能够生成excel表格

import re
import jieba
import pandas as pd
import openpyxl

txt=open("C:/Users/Elegantmadman/Desktop/1.txt",'r').read()
words=jieba.lcut(txt)
count={}
sum = len(words)
for word in words:
    if len(word)==1:
        continue
    else:
        count[word]=count.get(word,0)+1
items=list(count.items())
items.sort(key=lambda x:x[-1],reverse=True)
list_word = []
list_num = []
list_sum = []
sum_count=0
for word, count  in items:
    list_word.append(word)
    list_num.append(count)
    sum_count += count
    #print("{0:<10}{1:>5}".format(word,count))
result = pd.DataFrame({'word': pd.Categorical(list_word),
                       'num':pd.Series(list_num, dtype='int'),
                       'frequency_sum':pd.Series([i/sum*100 for i in list_num] , dtype='float32'),
                       'frequency':pd.Series([i/sum_count*100 for i in list_num], dtype='float32',)})
result.to_excel('C:/Users/Elegantmadman/Desktop/6.xlsx', sheet_name='Sheet1')
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值