对cvs文本关键词进行词频统计

#-*-coding:utf-8-*-
import os
import json
data={}
with open('2009_all_keywords.txt','r',encoding='utf-8',errors='ignore') as f:
    txt_read = f.read()
    txt_read= txt_read.strip()
    txt = txt_read.split('\n')
    for row in txt:
        list_row=row.split(' ')
        list_row = [i for i in list_row if(len(str(i))!=0)]
        for word in list_row:
            word=word.strip().strip(';')
            if word in data.keys():
                data[word]=data[word]+1
            else:
                data.update({word:1})
        print('********')
        data_print = sorted(data.items(),key=lambda item:item[1],reverse=True )
        print(data_print)
        #print('********')
data_save=sorted(data.items(),key=lambda item:item[1],reverse=True )
lsobj = json.dumps(data_save)
with open('2009_word_count.txt','w',encoding='utf-8',errors='ignore') as f:
    f.write(lsobj)

作者:WangB

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值