python 处理大量文件

事情还得从用python写爬虫开始说起,当时在freebuf看了几篇爬虫得文章,然后又遇到项目中要用很多图片,就现学现用在网上爬了很多图片下来。因为当时爬下来的都是表情的图片,所以前几天的时候本来想把爬下来的所有的表情图片添加到qq表情包里面的。结果每页表情最多放300多张,这就尴尬了。我爬的图片每个文件夹大部分都超过了300张。所以后来想用python把大量的图片分别放到不同的文件夹里面。

好吧。上代码吧。原理还是多简单的主要就是shutil.move()和os.mkdir()的使用

import os
import os.path
import shutil
import sys


root = sys.argv[1] # file path
count = int(sys.argv[2]) #file count

num = 0
ismove=0
for parent,dirnames,filenames in os.walk(root):
	r = len(filenames) / count
	for i in range(r+1):
		p = root+"/"+str(i)
		os.mkdir(p)
	for filename in filenames:
		num = num + 1
		if num / count == 1:
			ismove = ismove + 1
			num=0
		p = root +"/"+ str(ismove)
		path = os.path.join(parent,filename)
		print(path+"==="+p)
		shutil.move(path,p)
#使用方法 python xxxx.py 文件路径 文件数量

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值