1.查找重复图片

利用文件的MD5值可查找完全一样的重复图片

import os,time,hashlibdef getmd5(file):if not os.path.isfile(file):  return  fd = open(file,'rb')md5 = hashlib.md5()md5.update(fd.read())fd.close()return md5.hexdigest() if __name__ == "__main__":allfile = []md5list = []list_delete = []start = time.time()path = 'D:\\_PLAY\\新建文件夹\\'for filepath,dir,filelist in os.walk(path):for filename in filelist:allfile.append(os.path.join(filepath,filename))#根据MD5值比较for photo in allfile:md5sum = getmd5(photo)if md5sum not in md5list:md5list.append(md5sum)else:list_delete.append(photo)print('重复的照片有:',list_delete)#删除图片for i in range(len(list_delete)):os.remove(list_delete[i])

二.查找相似图片

本文采用四种哈希值进行比较：
1.感知哈希(perception hashing)
2.平均散列(average hashing)
3.梯度散列(difference hashing)
4.离散小波变换(wavelet hashing)

import os,imagehash
from PIL import Imagedef hash(path):highfreq_factor = 4 # resize的尺度hash_size = 32 # 最终返回hash数值长度image_scale = 64img_size = hash_size * highfreq_factorlist_file = []list_phash = []list_ahash = []list_dhash = []list_whash = []for file in os.listdir(path):if os.path.splitext(file)[1] == '.jpg':  path_file = os.path.join(path, file)  # 拼路径list_file.append(file)phash = imagehash.phash(Image.open(path_file),hash_size=hash_size,highfreq_factor=highfreq_factor)#感知哈希(perception hashing)ahash = imagehash.average_hash(Image.open(path_file),hash_size=hash_size)#平均散列(average hashing)dhash = imagehash.dhash(Image.open(path_file),hash_size=hash_size)#梯度散列(difference hashing)whash = imagehash.whash(Image.open(path_file),image_scale=image_scale,hash_size=hash_size,mode = 'db4')#离散小波变换(wavelet hashing)list_phash.append(phash)list_ahash.append(ahash)list_dhash.append(dhash)list_whash.append(whash)#print(list_hash)for i in range(len(list_file)):for j in range(i+1,len(list_file)):phash_value = 1-(list_phash[i]-list_phash[j])/len(list_phash[i].hash)**2ahash_value = 1-(list_ahash[i]-list_ahash[j])/len(list_ahash[i].hash)**2dhash_value = 1-(list_dhash[i]-list_dhash[j])/len(list_dhash[i].hash)**2whash_value = 1-(list_whash[i]-list_whash[j])/len(list_whash[i].hash)**2value_hash = max(phash_value,ahash_value,dhash_value,whash_value)if(value_hash > 0.9):#阈值设为0.9size_i = os.path.getsize(path + '\\' + list_file[i])size_j = os.path.getsize(path + '\\' + list_file[j])print(list_file[i],str(size_i/1024)+'KB')print(list_file[j],str(size_j/1024)+'KB')print(value_hash)print('***********************')if __name__ == '__main__':path = r'D:\_PLAY\新建文件夹\Excel\ALL_Daily'hash(path)

python查找相似图片或重复图片相关推荐

python 查找excel表格中重复的信息并标出来
Python之PyMuPDF--批量处理一个PDF文件中发票的总金额提取 python 查找excel表格中重复的信息并标出来 python 提取excel表格中指定的关键字 python 批量修改文 ...
【2021-12-06】爬取关键词图片 - 去掉重复图片
''' 爬取指定关键字图片 ''' import re # 正则表达式,解析网页 import requests # 请求网页 import traceback import osdef dowmlo ...
python类似图片查找_python查找重复图片并删除（图片去重）
本文实例为大家分享了python查找重复图片并删除的具体代码,供大家参考,具体内容如下和网络爬虫配套的,也可单独使用,从网上爬下来的图片重复太多,代码支持识别不同尺寸大小一致的图片,并把重复的图片删 ...
Python批量删除错误图片、修改文件名以及删除重复图片
一.批量删除错误图片: 代码如下: import osfor name in range(1,150):with open('C:\\Users\\adimin\\Desktop\\Pixiv_Img ...
查找重复文件_快速查找、删除重复图片及文件！
照片或者文件多了难免就会有重复,浪费硬盘空间的情况,下面让我们一起使用ACDSee 官方免费版软件删除你的重复图片及文件吧! 1. 打开软件,点击"工具"下的"查找重复项 ...
用 Python 实现哈希算法检测重复图片
用 Python 实现哈希算法检测重复图片 - 简书 Python实现哈希算法,并检测图片重复的教程_Steven_ycs的博客-CSDN博客_python实现哈希
重复图片查找清理工具：Duplicate Photos Fixer Pro for Mac
想要清理重复的照片?这款Duplicate Photos Fixer Pro for Mac能够帮到大家,这是一款能够快速检测那些重复图像,并将它们进行清理,从而释放出更多的空间.是一款十分好用的软件 ...
python 查找损坏图片_使用Python查找损坏的图像
python 查找损坏图片赶上本系列: 第1部分:使用Python自动执行数字艺术家的重复任务第2部分:针对数字艺术家的Python文件管理技巧如果您正在计算机上处理图像,那么最终一定会遇到 ...
Python查找目录下最大的指定个数的文件和图片
在我们平时的运维过程中,在查找.筛选.删除等操作是比较频繁的,当你的服务器老是被某个大型文件或者大型日志而占用空间的话,是很让人心烦的,不好找,还容易把业务扰乱,下面,我用python编写了一个小程序 ...
python检测图片相同部分_用 Python 实现哈希算法检测重复图片
在 Python 中导入 hashlib 模块,调用函数就可以生成某一个字符串或者文件的哈希值.这个算法对于未被篡改的上传文件非常有效,如果输入数据有细微变化,加密哈希算法都会导致雪崩效应,从而造成新 ...

python查找相似图片或重复图片

1.查找重复图片

二.查找相似图片

python查找相似图片或重复图片相关推荐

最新文章

热门文章