python去除重复图片（数据清洗）

数据清洗是指对数据进行审查、修改和删除，以确保数据的准确性、完整性和一致性。数据清洗通过重复数据处理：识别并处理数据中的重复记录，避免因数据重复导致分析结果产生偏差。

数据清洗的意义在于确保数据质量，提高数据分析和挖掘的准确性和可靠性。通过数据清洗，可以减少数据分析过程中的错误和偏差，确保分析结果更加可信。同时，高质量的数据也为后续建模、预测和决策提供了坚实的基础。

在实际应用中，数据清洗往往是数据预处理的一个重要环节，前期投入一定的精力和时间进行数据清洗，可以为后续的数据分析和挖掘工作节省大量时间和资源，并使分析结果更加可信可靠。

下面介绍使用python去除重复图片：

方法1：

其中1文件夹中有重复出现的图片，只是图片名不同。

 

 

 2文件夹为空文件夹，用于保存去除的重复图。运行py文件。

<