python访问多个文件夹并清除其中不符合要求的文件

深度学习在处理视频数据集中长度过短的脏数据时,需要批量访问嵌套的多级文件夹,找出其中过短的视频数据,并自动删除这些文件,实现代码如下:

import os
import cv2

# address of the files to process
rawpath = '/root/autodl-tmp/webvid/video10_20%'
video_len = 64

# to get dirs' path and filename
for root, dirs, files in os.walk(rawpath+'/'):
    for f in files:
#         a = root.rfind('/')
		# pt: path of a single file
        pt = root+'/'+f
        cap = cv2.VideoCapture(pt)
        flag = 0
        while flag < video_len:
            ret, img = cap.read()
            if ret:
                flag += 1
            else:
            	# just raise error or delete the chosen file
#                 raise NotImplementedError(f"the video '{pt}' is too short")
                print('rm -rf ' + pt)
                os.system('rm -rf ' + pt)
                break
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
以下是一个示例代码,实现了读取Excel文件并创建新文件夹,并根据内容进行重命名,并将指定内容写入生成的txt文件放入新文件夹中的功能。同时,它还演示了如何读取新生成的文件夹中的所有txt文件,并将其中的空行删除。 ```python import pandas as pd import os # 读取Excel文件 df = pd.read_excel('data.xlsx') # 创建新文件夹 if not os.path.exists('new_folder'): os.makedirs('new_folder') # 根据内容进行重命名,并将指定内容写入生成的txt文件放入新文件夹中 for index, row in df.iterrows(): filename = 'new_folder/' + str(row['ID']) + '_' + row['Name'] + '.txt' with open(filename, 'w') as f: f.write('ID: ' + str(row['ID']) + '\n') f.write('Name: ' + row['Name'] + '\n') f.write('Content: ' + row['Content']) # 读取新生成的文件夹中的所有txt文件,并将其中的空行删除 for filename in os.listdir('new_folder'): if filename.endswith('.txt'): with open('new_folder/'+filename, 'r') as f: lines = f.readlines() with open('new_folder/'+filename, 'w') as f: for line in lines: if line.strip(): f.write(line) ``` 这个代码示例假设Excel文件名为“data.xlsx”,其中包含以下列:ID、Name和Content。它还假定新文件夹名为“new_folder”,可以根据需要进行更改。请注意,如果新文件夹已经存在,则不会创建它。如果要在每次运行时重新创建文件夹,请在代码中添加相应的逻辑。 在第一个循环中,我们使用df.iterrows()方法遍历数据框中的每一行,并根据ID和Name创建新的文件名。然后,我们使用Python的内置open()函数创建文件,并将所需的内容写入其中。在这个例子中,我们将ID、Name和Content写入每个txt文件中。 在第二个循环中,我们使用os.listdir()方法列出新文件夹中的所有文件名,并使用字符串的endswith()方法筛选出仅为txt文件文件名。然后,我们使用内置的open()函数打开每个文件,并使用readlines()方法读取其所有行。接下来,我们使用一个简单的for循环遍历文件中的每一行,并使用strip()方法删除其中的空格和换行符。最后,我们使用write()方法写入每一行到同一文件中,从而删除空行。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

胖虎干嘛了

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值