python 统计词频

import sys
reload(sys)

sys.setdefaultencoding("utf-8")

#import jieba
#import jieba.analyse

#wf = open("clean_title.txt", "w+")
#for line in open('clean_data.csv'):

#    item = line.strip('\n\r').split('\t')
#    tags = jieba.analyse.extract_tags[item[0]]
#    tagsw = ",".join(tags)
#    wf.write(tagsw)

#wf.close()

word_lst = []
word_dict = {}
with open('clean_title.txt') as wf,open("word.txt",'w') as wf2:
    for word in wf:
        word_lst.append(word.split(','))
        for item in word_lst:
            for item2 in item:
                if item2 not in word_dict:
                    word_dict[item2] = 1
                else:
                    word_dict[item2] += 1

    for key in word_dict:
        print key,word_dict[key]
        wf2.write(key+' '+str(word_dict[key])+'\n')

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值