文本分词,并统计分词出现次数,结果输出到文件中

#-*- coding: utf-8 -*-
import sys
import jieba

def print_dict(pdict,filename):
        reload(sys)
        sys.setdefaultencoding( "utf-8" )
        fp = open(filename, "w")
        
        for k,v in pdict.items():
                if k=='':
                        continue
                fp.write(k)
                fp.write(":")
                fp.write(str(v))
                fp.write("\n")        
        fp.close()
        print 'write to file over!'
        
        
def print_words(text,filename):
        split_text = text.split('/')
        out_list =[]
        out_dict ={}

        for it in split_text:
                if it in out_list:
                        out_dict[it] = 1 + out_dict[it]
                else:
                        out_list.append(it)
                        out_dict[it] = 1
       
        print_dict(out_dict,filename)
       
  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值