python 遍历文件,组成列表格式

#coding:utf-8
import json
import os
from jieba import analyse
from xlwt import *

def listFile(fileDir):
    L = []
    CL = []
    for root,dir,files in os.walk(fileDir):
        for file in files:
            if os.path.splitext(file)[1] == '.json':
                L.append(os.path.join(root,file))

    for jsons in L:     #json文件的处理
        try:
            with open(jsons,'r') as f:
                jsonObject = json.load(f)
                for jo in jsonObject:
                    atty = jo['page_action_type']  #json文件取内容
                    cntt = jo['content']
                    if atty == '07' and len(cntt) > 0:
                        CL.append(cntt)
        except Exception as e:
            continue
    return CL

def resolveKeyword(content):  
    #print content
    kws = ''
    tfidf = analyse.tfidf(content)
    print tfidf
    length = len(tfidf)
    if length > 1:
        for i,t in enumerate(tfidf):
            if i == 0:
                kws = t
            else:
                kws = kws + ' OR ' + t
        return kws

if __name__ == "__main__":
    ###json文件所在的目录
    filename = "E:\siteVerify\BD\data\scansbak"
    KL = []
    file = Workbook(encoding='utf-8')
    table = file.add_sheet(u"kwss")
    CL = listFile(filename)
    filter(None,CL)  #过滤
    for i,c in enumerate(CL):  #建立索引的形式
        kw = resolveKeyword(c)
        if kw != None:
            KL.append(kw)

    for t,k in enumerate(KL):
        print t
        table.write(t,0,t)
        table.write(t,1,k)

    file.save("E:\siteVerify\BD\data\kwss.xls")
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值