快速删掉文件夹里重复或者相似的图片

需求：快速删掉文件夹里重复或者相似的图片

一.软件推荐

1.电脑重复资源查找器

免费，简单好操作，在各种图像格式间比较内容，内置高速比较算法，灵活的扫描源：驱动器、文件夹、文件及类型，结果可复用：能保存 / 载入重复图片列表，支持所有常见图片类型（1,000 种以上）。

2.Duplicate Cleaner

Duplicate Cleaner Pro （官网：Duplicate Cleaner - Remove duplicate files）中文版是一款功能非常强大的重复文件查找工具，这个是无需注册、无需安装的单文件绿色便携版！程序可以帮助你快速的查找重复的图片、音乐等各种文件，可以根据字节、MD5、SHA等多种方式来 快速扫描！它可以同时搜索多个文件夹，支持按文件名称、大小和时间进行搜索。

3.DoubleKiller Pro

DoubleKiller Pro是一款小巧易用的多功能电脑重复文件清理软件，可以帮助你以文件名、大小、创建时间或CRC32校验值等特征快速扫描电脑中的所有重复文件，同时还能够支持搜索不同驱动器的指定类型的重复文件，并进行清除，很好解决电脑使用久了之后导致大量重复文件的堆积，占据电脑的大量内存的问题。

二.Github项目（python）实现

找相似图像：

1.FileManager

该项目支持22项功能如下：

• 导出文件信息
• 查找重复文件（基于大小和修改时间的判断方式， 以及基于文件 hash 值的判断方式）
• 文件还原与备份（增量备份、文件同步、 文件还原）
• 根据样本或者记录删除文件或者还原文件
• 一键清空目录下所有空 文件夹
• 搜索文件或者文件夹（可搜索隐藏文件）
• 拷贝目录结构（导出到文件、 从文件恢复目录结构、导出目录结构到新目录下）
• 比对文本文件内容（比对文 章、文档、代码的差异并将结果输出，可批量比对）
• 计算文件 hash 值
• 校 对字符串（校对两个字符串是否一致，包含忽略大小写，前后空格，以及忽略所 有空格）
• 提取视频帧图像（可以批量快速提取指定视频的某一帧或者某一秒 的图像）
• 查找相似图片（根据算法计算图片的相似度，并将满足相似度阈值 的图片移动到指定目录，可以有效找出不同分辨率、不同大小甚至是经过裁剪或 者加过水印的相似图片）
• 查找相似视频（比对视频帧图像的相似度找出相似 视频并导出）
• 以图搜图（选中图片在另一任意目录中搜索与之相似的图片）
• 以视频搜相似视频（选中视频在另一任意目录中搜索与之相似的视频，主要 用于找出内容一样但是分辨率不同，或者内容一样只是水印有差异的视频）
• 批量重命名
• 合并视频（将选中的视频合并为一个视频，可以指定视频帧率）
• 裁剪视频（集合了之前 video_cut 项目的代码）
• 批量裁剪视频（选中多个 视频批量裁剪，用于去除视频片头片尾特别好用）
• 提取音频和转换音频格式 （可以从视频中提取音频，也可以进行音频格式转换，可以指定音频帧率格式， 不一定支持所有音频格式）
• 找出损坏或者不完整的视频（基于 ffmpeg）
• 获取时间戳（时间与时间戳之间相互转换）以及修改文件的时间戳 所有的文件删除、文件更新操作进行防呆保护，最大限度保证数据安全！所 有操作都有日志，方便追溯和还原。涉及程序配置内容修改的操作会有权限验证

所有操作均可通过GUI界面进行操作，源码分享实属良心。

2.Imagededup

具体使用方法参考：https://github.com/chinalu/imagedups

安装
python setup.py install
使用方法
仅显示重复的图片:imagedups -p /path/to/image/folder1  
[+]开头的文件是保留的文件；
[-]开头的文件是可以清理的文件。
递归查找文件：imagedups -r -p /path/to/image/folder
查找并删除文件:imagedups -r -d -p /path/to/image/folder
删除文件是不进行确认:imagedups -r -d -N -p /path/to/image/folder
请做好数据备份

3.PicSniffer

主要采用Inception-v3模型对图片进行特征提取

文章首发地址： FUNNY AI