Python在多级文件夹中删除非图片文件(数据清洗)

最新推荐文章于 2024-09-08 17:23:14 发布

学术菜鸟小晨

最新推荐文章于 2024-09-08 17:23:14 发布

阅读量222

点赞数

分类专栏： Python 文章标签： python

本文链接：https://blog.csdn.net/qq_34717531/article/details/130749563

版权

Python 专栏收录该内容

46 篇文章 31 订阅 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了如何使用Python脚本在包含多级子文件夹的结构中，删除所有非图片（如.tif和.jpg）的文件。通过适当修改，代码同样适用于处理更多图片后缀类型。

摘要由CSDN通过智能技术生成

在各个子文件夹中有多个图片，也有多个非图片文件，如：000001

使用以下代码即可删除非图片数据了。

# -*- coding: utf-8 -*-
import os
import cv2

path = "./datasets"         # 根目录

file = os.listdir(path)

for file1 in file:
    
    path1 = path + "/" + file1 

    file1 = os.listdir(path1)
    
    for filename

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

学术菜鸟小晨

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
打赏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

订阅专栏

Python数据清洗之----删除非图片文件

cumtchw

09-02

549

#!usr/bin/env python #-*- coding:utf-8 _*- import os import shutil def is_image(file): return file.endswith('jpg') or file.endswith('png') or file.endswith('jpeg') def check_files(data_dir, label, backup_dir, delete, backup): count_error = ...

Python数据清洗之----剔除筛选图片

cumtchw

09-02

1368

#!usr/bin/env python #-*- coding:utf-8 _*- """ @Author : LIAOH @file : 剔除图片.py # @Time : 2020/8/14 10:35 """ import os def count_files(data_dir, select_data_dir, dir): count = 0 for parent, dirs, files in os.walk(dir): if files == []...

参与评论您还未登录，请先登录后发表或查看评论

python删除文件语句_如何使用Python选择性地删除文件夹中的文件？

weixin_28764585的博客

03-02

279

问题1问题描述：在一个文件夹中，有着普通文件以及文件夹，那么我们如何做到删除全部文件夹而不删除文件呢？如下图所示，我们想要删除test文件夹中的所有文件夹，而保留其他文件：Version 1看到这个问题的第一刻，我想到的是文件夹没有后缀名，其他文件有后缀名，而拥有后缀名则意味着文件名称里面会有.的存在，我们就可以利用这个差别，来区分两者，进而实现问题描述中的功能。于是我就写出了以下Python代码...

python 删除损坏的图片数据

m0_38053092的博客

04-08

2770

在图片数据处理的过程中遇到这样一个问题：我想将图片中纯在不能打开损坏的图片删除掉（删除的文件包含字节数为空的图片和那些有字节数但是打不开的图片）我的解决如下： 1：首先判断图片数据字节是否为null； 2：通过python imghdr 模块中what()函数获取有字节数但是不能打开图片的返回值是什么。辨别是否所有打不开的图片返回的同一个类型，若是执行代码如下： coding=utf-...

Python遍历磁盘找出占用空间最大的文件

Tian_CMCC

03-07

1320

一. 前言今早发现电脑的磁盘空间莫名其妙的占满了…也不知道是哪个文件占用了大量的内存空间。就随手写了个python，把磁盘空间全部遍历一遍，找到了大量占用磁盘空间的罪魁祸首。😃 二. 深度遍历磁盘下所有文件（递归）因为Windows的目录结构采用的是树形结构，所以可以使用深度遍历或广度遍历来遍历所有的文件，这里采用的是递归方法来实现深度遍历： import os def get_files(path): global lst if not os.path.exists(path):

在Python中读取文件

最新发布

qq_47885795的博客

09-08

538

在Python中读取Excel文件，最常用的库是openpyxl（针对.xlsx格式）和xlrd（针对.xls格式，但请注意xlrd从版本2.0开始不再支持.xlsx文件）。和pandas则成为了处理. xlsx文件。

Python脚本实现多级目录下CSV文件自动化汇总

此外，脚本名称中包含了多个缩写，可能是文件夹或模块名称，这表明可能还用到了其他未明确说明的库来完成特定功能，如数据清洗、数据分析等。 7. 压缩包子文件的文件名称列表解读：列表中的文件名称可能代表了脚本...

数据处理的艺术：Python util库在实际应用中的强大表现

在这些标准库中，Python Util库是一个非常实用的组件，它包含了多个模块，用于执行各种通用编程任务，如字符串操作、文件路径处理、日期时间管理等。本文将带您探索Python Util库的基本概念、功能以及如何在实际项目...

【数据采集与数据清洗】课堂笔记

weixin_55270959的博客

06-29

4412

第一章大数据概述 1.1 进入大数据时代的原因第三次信息化浪潮信息科技为大数据时代提供支撑 1）存储设备容量不断增加 2）CPU处理能力大幅提升 3）网络带宽不断增加数据产生方式的变革促成大数据时代来临 1.2 大数据概念：大数据不仅仅是数据的“大量化”，而是包含“快速化”“多样化”和 “价值化”等多重属性 1.3 大数据应用大数据关键技术 1）大数据处理过程：大数据采集-大数据预处理-大数据存储-大数据分析与挖掘-大数据可视化 2）大数据技术体系：数据采集与预处理技术，分布式数据存储技.

pandas数据读取与清洗视频02-pd.read_excel()读取excel文件

python技巧分享

12-11

394

本系列课程适用人群： python零基础数据分析的朋友；在校学生；职场中经常要处理各种数据表格，或大量数据（十万级以上）的朋友；喜欢图表可视化的朋友；系列视频目前可在B站观看，会定期更新，欢迎大家吐槽！本节概要：python能快速读取电脑的excel文件，不用担心一个几十兆的文件打不开 视频地址：python读取excel文件本节代码： """ # ========

python删去本地文件夹中指定文件

Jecretariat的博客

12-24

816

python删去本地文件夹中指定文件主要用到了os.remove(）该方法主要用到了os.remove(）该方法话不多说，上实例与代码实例：删除文件夹内文件名带“()“的文件。原情况： # 删去文件夹中指定文件 import os def delete_files(): for filename in os.listdir(dataPath): # 获取文件夹内所有文件的...

python骚操作——图片灰度处理

sixkery的博客

09-08

4743

先来张图片感受下: 处理过的图片代码奉上： from PIL import Image import numpy as np a = np.asarray(Image.open('1.jpg').convert('L')).astype('float') depath = 10 # (0-100) grad = np.gradient(a)# 取图像灰度的梯度值 grad_x,g...

python—深度学习数据预处理—剔除读取失败的图片

weixin_48424686的博客

05-21

1217

起因：在复现下面这个猫狗粉类代码时，总是遇到这样的报错：（猫狗分类实战，推荐像我一样的纯小白阅读）https://blog.csdn.net/qq_33160678/article/details/108017822 博主说是因为路径问题，但是我仔细查看了路径应该是没问题的。而且最为迷惑的是，有时候一开始运行就报这个错，有时候则是运行了一会之后才出现这个错误。经最强外挂（男朋友）提醒，代码能跑起来应该不是路径问题，应该是数据的问题。我打开data下的文件夹一看，嚯，真的有些图片是损坏的。

调用百度AI实现人像分割（下）

热门推荐

qq_34717531的博客

12-20

2万+

人像分割是一种计算机视觉技术，旨在将图像中的人物与背景进行有效地分离。这项技术在许多应用中都非常有用，比如人像摄影、视频编辑、虚拟背景等。通常，人像分割可以通过以下几种方式实现：传统方法：传统的人像分割方法通常基于图像的颜色、纹理、边缘等特征来区分人物和背景。这些方法包括阈值分割、边缘检测、区域生长等，虽然在某些场景下仍然有用，但在复杂场景下表现可能不佳。深度学习方法：近年来，随着深度学习技术的发展，基于神经网络的人像分割方法取得了巨大进展。特别是语义分割和实例分割技术，如FCN（全卷积网络）、Ma

python 指定时间运行代码

qq_34717531的博客

10-19

1万+

如果想要在指定时间里运行某段代码，可以参考以下程序。 import time from interval import Interval while True: # 当前时间 now_localtime = time.strftime("%H:%M:%S", time.localtime()) # 当前时间（以时间区间的方式表示） now_time = Interval(now_localtime, now_localtime) print(now_time)

python学习（三）字符串替换指定位置元素

qq_34717531的博客

01-13

1万+

s='123254321' #将第4个2替换成4 i,j=3,'4' string=list(s) #字符串转列表 string[i]=j #列表替换元素 z=''.join(string) #列表转字符串 print(z)

C++ dlib实现人脸识别

qq_34717531的博客

07-30

9291

前置（Ubuntu下配置c++dlib）：https://blog.csdn.net/qq_34717531/article/details/107682381 需要文件：shape_predictor_68_face_landmarks.dat dlib_face_recognition_resnet_model_v1.dat haarcascade_frontalface_alt2.xml 前二个在这 http://dl...

目标检测误检太多解决办法

qq_34717531的博客

11-03

4493

误检太多解决办法： 1.增加数据。 2.如果没有数据，增加负样本。将没有目标物体的场景当做负样本，生成空标签（如下代码），加入训练即可。 import os import xml.dom.minidom img_path = './fu/' xml_path = './xml/' for img_file in os.listdir(img_path): img_name = os.path.splitext(img_file)[0] #create an empty d

python-opencv实现检测物体轮廓矩形并扣出

qq_34717531的博客

01-14

3805

通过蓝色的阈值，去除背景，找出轮廓，并将图片扣出。其余颜色阈值： import cv2 import numpy as np img = cv2.imread("ce.jpg") # 检测蓝色的阈值 lower_blue=np.array([78,43,46]) upper_blue=np.array([110,255,255]) # change to hsv model hsv = cv2.cvtColor(img, cv2.COLOR_BGR2HSV) # get mask mas..

python从文件夹中读取文件的数据，并对文件中数据进行删除

05-25

读取文件夹中所有文件的数据，可以使用Python的os模块和glob模块。glob模块可以用于在文件夹中匹配所有符合特定模式的文件名，os模块可以用于操作文件。以下是一个示例代码，可以读取指定文件夹中的所有.txt文件，...