python-将文件按日期分类

最新推荐文章于 2022-04-06 19:41:37 发布
最新推荐文章于 2022-04-06 19:41:37 发布
阅读量2.3k 收藏 17
点赞数 5
分类专栏： python 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lidashent/article/details/113919375
版权

文章目录

问题

小米云盘只有5G,不经意间存了一些乱七八糟的东西，我希望将他们全部下载后然后清空小米云盘，这样小米云就不会偷偷地把一些我已经删掉的资料再同步给我的手机。
导致删不敢删，留着也烦人。我不希望那些公司玩弄我的资料。
下载后的文件自动按照时间分类创建一系列的文件夹分别存入下载的内容。
数千个文件按时间以及格式归类创建文件夹

解决

整体逻辑是读取所有的文件名字，找到文件后读取创建日期，格式信息，如果这个日期文件夹比如2020-2-1已经存在，再判断目标文件夹是否有重复文件，满足条件则将文件移入。否则创建一个新的创建日期的文件夹，然后移动入

成功截图

我要移动的文件有数千个，已经成功过了，因此这里放了一个测试的案例图片，只有两个文件。
在这里插入图片描述
在这里插入图片描述

读取文件的创建时间

os.stat() 方法
os.stat() 方法用于在给定的路径上执行一个系统 stat 的调用。
st_mode: inode 保护模式
st_ino: inode 节点号。
st_dev: inode 驻留的设备。
st_nlink: inode 的链接数。
st_uid: 所有者的用户ID。
st_gid: 所有者的组ID。
st_size: 普通文件以字节为单位的大小；包含等待某些特殊文件的数据。
st_atime: 上次访问的时间。
st_mtime: 最后一次修改的时间。
st_ctime: 由操作系统报告的"ctime"。在某些系统上（如Unix）是最新的元数据更改的时间，在其它系统上（如Windows）是创建时间（详细信息参见平台的文档）。

import os
import time
import datetime
def TimeStampToTime(timestamp):
    timeStruct = time.localtime(timestamp)
    return time.strftime('%Y-%m-%d %H:%M:%S',timeStruct)
imgPath = r'C:\Users\Administrator.DESKTOP-KMH7HN6\Desktop\need_main\temp\截屏\IMG_20210110_100531.jpg'
# ImageDate = datetime.datetime.strftime(time.ctime(os.stat(imgPath).st_mtime), "%Y-%m-%d %H:%M:%S")
a=os.stat(imgPath).st_mtime
print(TimeStampToTime(a))#2021-01-10 10:05:31
# print(ImageDate)

移动文件

import os,shutil
a=r"C:\Users\Administrator.DESKTOP-KMH7HN6\Desktop\111\a\1 (1).jpg"
b=r"C:\Users\1 (1).jpg"
shutil.move(a,b)#a->b

判断目录是否存在

import os
dirs = '/Users/'

if not os.path.exists(dirs):
    os.makedirs(dirs)

判断是否是重复文件

import os
filename = '/Users/p.txt'

if not os.path.exists(filename):
    os.system(r"touch {}".format(path))#调用系统命令行来创建文件

这个是判断文件是否存在的，肯定不对。
思路是得到文件夹下所有文件名字，然后用列表包含判断

        if filename in os.listdir(new_dir):
            print("重复文件，略过")
            pass
        else:
            move_file(new_dir)

创建文件夹

def manager_folders(path):
    if os.path.exists(path):
        pass
    else:
        os.makedirs(path)

遍历所有文件


import os
allFileNum = 0
myfile=[]
mydir=[]
def printPath(level, path):
    global allFileNum
    ''''' 
    打印一个目录下的所有文件夹和文件 
    '''
    # 所有文件夹，第一个字段是次目录的级别
    dirList = []
    # 所有文件
    fileList = []
    # 返回一个列表，其中包含在目录条目的名称(google翻译)
    files = os.listdir(path)
    # 先添加目录级别
    dirList.append(str(level))
    for f in files:
        if (os.path.isdir(path + '/' + f)):
            # 排除隐藏文件夹。因为隐藏文件夹过多
            if (f[0] == '.'):
                pass
            else:
                # 添加非隐藏文件夹
                dirList.append(f)
                mydir.append(path + '/' + f)
        if (os.path.isfile(path + '/' + f)):
            # 添加文件
            fileList.append(f)
            myfile.append(path + '/' + f)
    # 当一个标志使用，文件夹列表第一个级别不打印
    i_dl = 0
    for dl in dirList:
        if (i_dl == 0):
            i_dl = i_dl + 1
        else:
            # print("得到的文件夹",'-' * (int(dirList[0])), dl)
            # 打印目录下的所有文件夹和文件，目录级别+1
            printPath((int(dirList[0]) + 1), path + '/' + dl)
    for fl in fileList:
        # print("得到的文件路径",'-' * (int(dirList[0])), fl)
        # 随便计算一下有多少个文件
        allFileNum = allFileNum + 1
myfirstpath = r"C:/Users/Administrator.DESKTOP-KMH7HN6/Desktop/111"
printPath(1, myfirstpath)
print(myfile)

因此综合得到整体代码


import os,shutil
import time
import datetime
allFileNum = 0
myfile=[]
mydir=[]
this_folder=input("原始路径：").replace("\\",'/')
those_folder=input("目标路径：").replace("\\",'/')
def printPath(level, path):
    global allFileNum
    '''''
    打印一个目录下的所有文件夹和文件
    '''
    # 所有文件夹，第一个字段是次目录的级别
    dirList = []
    # 所有文件
    fileList = []
    # 返回一个列表，其中包含在目录条目的名称(google翻译)
    files = os.listdir(path)
    # 先添加目录级别
    dirList.append(str(level))
    for f in files:
        if (os.path.isdir(path + '/' + f)):
            # 排除隐藏文件夹。因为隐藏文件夹过多
            if (f[0] == '.'):
                pass
            else:
                # 添加非隐藏文件夹
                dirList.append(f)
                mydir.append(path + '/' + f)
        if (os.path.isfile(path + '/' + f)):
            # 添加文件
            fileList.append(f)
            myfile.append(path + '/' + f)
    # 当一个标志使用，文件夹列表第一个级别不打印
    i_dl = 0
    for dl in dirList:
        if (i_dl == 0):
            i_dl = i_dl + 1
        else:
            # print("得到的文件夹",'-' * (int(dirList[0])), dl)
            # 打印目录下的所有文件夹和文件，目录级别+1
            printPath((int(dirList[0]) + 1), path + '/' + dl)
    for fl in fileList:
        # print("得到的文件路径",'-' * (int(dirList[0])), fl)
        # 随便计算一下有多少个文件
        allFileNum = allFileNum + 1

#文件处理
def judge_file(oldPath,location):
    def TimeStampToTime(timestamp):
        timeStruct = time.localtime(timestamp)
        return time.strftime('%Y-%m-%d %H:%M:%S', timeStruct)
    def move_file(new_dir):
        old_file_name = oldPath.split("/")[-1]
        # 将文件移动到新文件夹
        shutil.move(oldPath, new_dir + '/' + old_file_name)  # a->b
        print("-"*50+"已完成：%.2f" % ((location + 1) / allFileNum*100))
    # ImageDate = datetime.datetime.strftime(time.ctime(os.stat(imgPath).st_mtime), "%Y-%m-%d %H:%M:%S")
    a = os.stat(oldPath).st_mtime
    #得到文件创建时间，判断文件夹是否存在
    creat_time=TimeStampToTime(a)[:-9]
    print(creat_time) #str 2021-01-10 10:05:31
    new_dir="%s/%s"%(those_folder,creat_time)
    #不存在文件夹则创建文件夹
    if not os.path.exists(new_dir):
        os.makedirs(new_dir)
        move_file(new_dir)
    #如果存在就判断是否是重复文件
    else :
        if oldPath.split("/")[-1] in os.listdir(new_dir):
            print("重复文件，略过")
            pass
        else:
            move_file(new_dir)
def do_all():
    for i in myfile:
        judge_file(i,myfile.index(i))
printPath(1, this_folder)
do_all()
input()

升级版，不仅按照日期，也按照格式进一步分类


import os,shutil
import time
import datetime
allFileNum = 0
myfile=[]
mydir=[]
movie_file_format=['avi','mpeg','mp4','mov','ProRes','DNxHR','mfx','mkv','wmv','flv','rmvb','webm','asf']
text_file_format=['DOC','PDF','HTML','TXT','HTL','DOCX']
img_file_format=['bmp','jpg','jpeg','png','tif','gif','pcx','tga','exif','fpx','svg','psd',
                 'cdr','pcd','dxf','ufo','eps','ai','raw','WMF','webp','avif','hdri','flic','emf','ico']
zip_file_format=['rar' ,'zip','7z','CAB','ARJ','LZH','TAR','GZ','ACE','UUE','BZ2','JAR','ISO','MPQ']
music_file_format=['PCM','WAV','AIFF','MP3','AAC','OGG','WMA','FLAC','ALAC','WMA']
this_folder=input("原始路径：").replace("\\",'/')
those_folder=input("目标路径：").replace("\\",'/')
def printPath(level, path):
    global allFileNum
    '''''
    打印一个目录下的所有文件夹和文件
    '''
    # 所有文件夹，第一个字段是次目录的级别
    dirList = []
    # 所有文件
    fileList = []
    # 返回一个列表，其中包含在目录条目的名称(google翻译)
    files = os.listdir(path)
    # 先添加目录级别
    dirList.append(str(level))
    for f in files:
        if (os.path.isdir(path + '/' + f)):
            # 排除隐藏文件夹。因为隐藏文件夹过多
            if (f[0] == '.'):
                pass
            else:
                # 添加非隐藏文件夹
                dirList.append(f)
                mydir.append(path + '/' + f)
        if (os.path.isfile(path + '/' + f)):
            # 添加文件
            fileList.append(f)
            myfile.append(path + '/' + f)
    # 当一个标志使用，文件夹列表第一个级别不打印
    i_dl = 0
    for dl in dirList:
        if (i_dl == 0):
            i_dl = i_dl + 1
        else:
            # print("得到的文件夹",'-' * (int(dirList[0])), dl)
            # 打印目录下的所有文件夹和文件，目录级别+1
            printPath((int(dirList[0]) + 1), path + '/' + dl)
    for fl in fileList:
        # print("得到的文件路径",'-' * (int(dirList[0])), fl)
        # 随便计算一下有多少个文件
        allFileNum = allFileNum + 1
#文件处理
def judge_file(oldPath,location):
    def TimeStampToTime(timestamp):
        timeStruct = time.localtime(timestamp)
        return time.strftime('%Y-%m-%d %H:%M:%S', timeStruct)
    def get_file_format(file_path):
        file_name=file_path.split("/")[-1]
        if file_name.find(".")>0:
            file_format=file_name.split('.')[-1]
            if file_format.lower() in movie_file_format or file_format.upper() in movie_file_format:
                return "视频"
            elif file_format.lower() in text_file_format or file_format.upper() in text_file_format:
                return "文本"
            elif file_format.lower() in img_file_format or file_format.upper() in img_file_format:
                return "图片"
            elif file_format.lower() in music_file_format or file_format.upper() in music_file_format:
                return "音频"
            elif file_format.lower() in zip_file_format or file_format.upper() in zip_file_format:
                return "压缩"
            else:
                return "其他"
        else:
            return "文本"
    def move_file(new_dir):
        old_file_name = oldPath.split("/")[-1]
        # 将文件移动到新文件夹
        shutil.move(oldPath, new_dir + '/' + old_file_name)  # a->b
        print("-"*50+"已完成：%.2f" % ((location + 1) / allFileNum*100))
    # ImageDate = datetime.datetime.strftime(time.ctime(os.stat(imgPath).st_mtime), "%Y-%m-%d %H:%M:%S")
    a = os.stat(oldPath).st_mtime
    #得到文件创建时间，判断文件夹是否存在
    creat_time=TimeStampToTime(a)[:-9]
    print(creat_time) #str 2021-01-10 10:05:31
    folder_format=get_file_format(oldPath)
    new_dir="%s/%s/%s"%(those_folder,creat_time,folder_format)
    #不存在文件夹则创建文件夹
    if not os.path.exists(new_dir):
        os.makedirs(new_dir)
        move_file(new_dir)
    #如果存在就判断是否是重复文件
    else :
        if oldPath.split("/")[-1] in os.listdir(new_dir):
            print("重复文件，略过")
            pass
        else:
            move_file(new_dir)
def do_all():
    for i in myfile:
        judge_file(i,myfile.index(i))
printPath(1, this_folder)
do_all()
input()
lidashent
关注
专栏目录
利用python实现文件根据创建日期分类
Nemuel的博客
01-07 1231
思路： 包装path对象，创建目录 循环遍历所有文件，获取每一文件的属性，并创建日期目录 移动文件 from pathlib import Path import os import shutil import time # test为原始目录，work为分类照片存放目录 dir1 = r'D:\upty\test' dir2 = r'D:\upty\work' # 包装，创建实例对象 path1 = Path(dir1) path2 = Path(dir2) # 判断work目录（若不存在，则创
python时间段按年做拆分,使用python按小时拆分日期时间列表
weixin_42626599的博客
03-26 1620
只需提取要分组的方面；如果要按小时分组，则需要提取一个属性：from itertools import groupby[list(g) for k, g in groupby(list_of_dts, key=lambda d: d.hour)]或者使用^{}代替lambda：^{pr2}$请注意，groupby()不进行排序；它只会生成具有相同分组键的连续值组。在如果需要对未排序的值进行分组，则...
将文件根据不同日期进行分类(文件归档)
fyzs19891124的博客
04-18 4544
BOOL CPigeonholeFileDlg::OnInitDialog() { CDialogEx::OnInitDialog(); // 将“关于...”菜单项添加到系统菜单中。 // IDM_ABOUTBOX 必须在系统命令范围内。 ASSERT((IDM_ABOUTBOX & 0xFFF0) == IDM_ABOUTBOX); ASSERT(IDM_ABOUT
FileClassify文件日期分类工具
weixin_33890499的博客
01-08 357
FileClassify是一款免费的文件按日期分类工具，能够根据文件修改日期，将文件移动或复制到对应的目录中 如果对您有较大的帮助，欢迎捐赠我们，我们对您表示衷心的感谢！ 1、输入文件夹和输出文件可以是同一个目录； 2、文件修改时间是整月计算，支持负数，-1指包含当前月。 下载：FileClassify V1.0.zip 界面 整理前 整理后 ...
python按时间分类数据_Python会按年份+月份分割数据表列表
weixin_39586526的博客
12-06 1026
I have the following csv files:# simulate a csv filefrom StringIO import StringIOdata = StringIO("""2012-04-01,00:10, A, 102012-04-01,00:20, B, 112012-04-01,00:30, B, 122012-04-02,00:10, A, 182012-05-...
批量根据文件修改时间分类文件工具——Python脚本
06-03
01 实现背景 1、os模块，实现文件的重命名、创建新文件夹操作 2、datetime模块，用于文件时间对比操作 3、fnmatch模块，用于模糊匹配文件名 02 实现目标 1、遍历搜索整个文件夹，包括文件夹内的所有文件夹 2、筛选这些文件中日期晚于2020年之后的文件 3、输出这些文件的文件名 03 注意事项 1、若想实现任意目录下的查找操作，可以在os.walk()函数中自行加入路径 2、若想实现对任意文件类型的查找操作，可以在fnmatch函数中自行匹配对应文件类型
Python日志的使用-按时间分割文件
qq_38259968的博客
05-12 1008
import logging, time from logging.handlers import TimedRotatingFileHandler # 单文件简单配置 logging.basicConfig(filename="run.log", level=logging.INFO, format="%(asctime)s %(levelname)s : %(message)s", datefmt="%Y-%m-%d %H:%M:%S",) # 按时间分割文件 logger = logging
python-developer-
02-14
1. **内置模块**：如os、sys、math、datetime等，用于文件操作、系统交互、数学计算和日期时间处理。 2. **网络编程**：socket模块用于网络通信，urllib和requests模块用于HTTP请求。 3. **并发与异步**：线程...
通过python将大量文件按修改时间分类的方法
01-20
程序主要是获取文件的修改时间，包括年和月，并以此为名创建文件夹，再用递归调用的方式遍历整个文件夹，将每一张照片拷贝到相应的文件夹下。 程序源码如下： #coding:utf-8 import os import sys import os.path ...
Photo-Sorter:按日期将照片分类到文件夹中
06-02
按日期将照片分类到文件夹中 有时我会通过 whatsapp 或蓝牙从我朋友的相机中获得一堆照片。 问题是，收到照片几天后就会散落一地。 所以我做了一个简单的脚本，根据它们被接收到文件夹中的日期对所有照片进行排序...
python-feedgen：用于生成ATOM提要，RSS提要和Podcast的Python模块
01-30
- **ATOM 提要**：是一种现代的、更灵活的格式，支持更丰富的元数据，比如作者信息、发布日期和分类。ATOM 提要通常用于博客和新闻站点，提供内容的订阅服务。 - **RSS 提要**：较早的格式，简单且广泛支持，主要...
Python按文件名分类学习
03-08
将杂乱的文件按照文件名分类移动到对应类别的文件夹中
python 按照日期切分大日志文件（重点）和按照指定大小切分日志文件
weixin_33796177的博客
05-16 1850
#!/usr/bin/envpython #-*-coding:utf8-*- #切分nginx按照日期切分日志文件 from__future__importdivision importos,sys big_file='/data/logs/media.net.error.log' #按照文件大小拆分 defsplit_by_filesize(...
根据文件的修改时间来分类文件
人在旅途
11-12 877
#!/bin/bash # exctute # ./mod.sh file_type input_folder output_folder # ./mod.sh *.txt /tmp /data/ # paramater count if [ ! $# -eq 3 ]; then echo "[ERROR] error paramater." exit fi # file
根据文件日期进行文件排序
掘金者说
03-25 1222
问题描述 由于进入生产环境，开发和部署人员不一致，下载的db文件放置到/data文件下，居然没有生效更新替换最新， 上述问题不常见，但是出现问题难排查。检查文件下面，会发现db文件项目已经越来越多了。 逻辑：同步获取db文件进行解析存放到缓存中，如果获取文件是旧的就没有生效了 考虑项目部署多样，运维任务备份方式不同， 防止下面错误的操作备份，导致数据缓存不是最新数据，引起排查不必要的问题，做了一个优化兼容 推荐方式 以前已上线的版本，需要注意此种备份方式 解决处理 下载db文件放置指定文件夹路径
docker swarm 数据卷操作
weixin_43931625的博客
08-23 752
dockerswarm数据卷操作
python学习[3]_按日期分割数据集
热门推荐
XiaoV_0305的博客
03-04 1万+
按日期分割数据集-1、 首先我这里的数据集，形式如下图： 这里可以看见第一行为数据的属性，最后一个为时间，格式为.csv文件，我希望按日期（年月日）划分出数据，即按天将数据分割出来。2、由于数据集较大，因次需要导入pandas，利用pandas将csv文件导入到Python中。 3、假设导入的变量为d，那么2014年11月18号这天的数据即可以这样截取：d[d[‘time’].str.conta
Python 将日期按年，月，日对数据进行分组归类及绘图
04-06 8888
Python实现文件整理(依照文件创建时间)
Liubingzhe
04-04 1565
前言 前几天需要做一个视频，是一个活动的全程录像，大量的mpg格式的视频，需要从中挑选精品视频按活动流程，用pr做成一个片头，需要有整个活动大体流程，不超过5分钟。面对大量视频，能不能用python让视频按时间归类，然后我每个时间段都可以选出一些视频，保证时间顺序。 思路 对于当下热门语言Python，自然不缺少IO操作库，通过一阵检索，找到shutil库： shuil模块提供了许多对文件和文件...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值