python查找中文字符_python实现递归查找某个路径下所有文件中的中文字符

本文实例为大家分享了python实现递归查找某个路径下所有文件中的中文字符,供大家参考,具体内容如下

# -*- coding: utf-8 -*-

# @ description:

# @ author:

# @ created: 2018/7/21

import re

import sys

import os

reload(sys)

sys.setdefaultencoding("utf8")

def translate(str):

out = set()

line = str.strip().decode('utf-8', 'ignore') # 处理前进行相关的处理,包括转换成unicode等

p2 = re.compile(ur'[^\u4e00-\u9fa5]') # 中文的编码范围是:\u4e00到\u9fa5

zh = " ".join(p2.split(line)).strip()

# zh = "\n".join(zh.split()) #dsds经过相关处理后得到中文的文本

for s in zh.split():

out.add(s) # 经过相关处理后得到中文的文本

return out

def extract_file(path):

result = set()

try:

f = open(path) # 打开文件

lines = f.readlines()

for line in lines:

string = translate(line)

if string:

result.update(string)

except exception as e:

pass

return result

def extract(path):

result = set()

files = os.listdir(path)

for file in files:

if not file.startswith("."):

if not os.path.isdir(path + "/" + file): # 判断是否是文件夹,不是文件夹才打开ssgsg判断是否是文件夹,不是文件夹才打开

sub_file = extract_file(path + "/" + file)

if sub_file:

result.update(sub_file)

else:

print file

child = extract(path + "/" + file)

if child:

result.update(child)

return result

if __name__ == '__main__':

path = "/users/common"

result = extract(path)

res_file = open("result.txt", "w")

for s in result:

res_file.write(s + "\n")

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持萬仟网。

如您对本文有疑问或者有任何想说的,请点击进行留言回复,万千网友为您解惑!

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值