python下载图片不完整_【Python】检测下载不完整、半截灰色的JPG、JPEG、PNG图片脚本...

最新推荐文章于 2023-02-09 11:34:27 发布
最新推荐文章于 2023-02-09 11:34:27 发布
阅读量709 收藏 2
点赞数
文章标签： python下载图片不完整
本文介绍了一种检测Python下载后可能出现的不完整图片的方法，包括检查JPG和PNG图片文件的结束标识。通过创建`CheckImage`类，利用文件尾部的特定标识来判断图片是否完整。同时，提供了`CheckBrockImage`类用于遍历文件夹，找出并删除不完整的图片。
摘要由CSDN通过智能技术生成

爬取图片下载到本地的时候，总有一些图片显示不完全，例如这样：

错误图片展示

watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyNzM5NDQw,size_16,color_FFFFFF,t_70

watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyNzM5NDQw,size_16,color_FFFFFF,t_70

出现这种问题的原因是什么呢？

1、网络问题：网络不稳定，接收到的图片信息不完整。也就是说response有问题；

2、本地磁盘满了：有时候接收到的图片信息完整，但是本地磁盘存不下了，毕竟一个图片也要好几Mb呢。

如何检测错误图片呢？

试了很多方法，一个较好的方法就是判断jpg、jpeg、png文件结尾的标识。

JPG文件结尾标识：\xff\xd9

JPEG文件结尾标识：\xff\xd9

PNG文件结尾标识：\xaeB`\x82

检测不完整图片代码

"""

检测图片完整性

"""

最低0.47元/天 解锁文章
weixin_39860952
关注
图片转PDF（支付jpg.jpeg.png）python 脚本
05-29
图片转PDF（支付jpg.jpeg.png）python 脚本修复版
Python下载的图片不完整之解决方案
luwieer的博客
11-13 2396
项目场景： 最近因为疫情在家赋闲，跟着网上的文章学习Python爬虫。 这个过程中遇到无数千奇百怪的问题，其中最困扰我的莫过于个别下载下来的图片不完整。 问题描述： Windows 7 Pro 64位，Python 3.8.6 统计规律，当服务器连接质量不佳时，下载下来的图片有极大的概率会产生因为文件不完整而形成的灰色的色块，尤其是大尺寸的jpg格式的文件。 如图所示： ![在这里插入图片描述](https://img-blog.csdnimg.cn/2020111309114894.jpg?x-os
python判断jpeg图片的完整性
熊小猫的算法历程
09-12 9700
用扩展名判断文件格式非常简单，但是有可能是错误的。 jpeg文件有固定的文件头，其文件头的格式如下： Start Marker | JFIF Marker | Header Length | Identifier 0xff, 0xd8 | 0xff, 0xe0 | 2-bytes | "JFIF\0" 所以可以通过文件头的方式快速判断文件格式： def is_j
python读取、写入文件（不全）
Milanien的博客
05-17 4970
python能够打开的文件类型有：txt，xlsx，csv，zip，json，xml，html，images，hdf，pdf，docx，mp3，mp4 1.txt文件 f=open(filepath,'r')或with open(filepath,'r')或codecs.open()或io.open() lines=f.read()或for line in f.read()或f.readli...
python下载大文件-python requests 下载大文件不完整
weixin_37988176的博客
11-01 1078
目前我有一个脚本, 从帝联的 CDN 外链获取一下文件作为备份.使用的是Python 2.7.10requests 2.8.1目前碰到一个情况, 使用 requests 下载大文件的时候会出现下载文件不完整的情况, 出现的概率非常大, 应该不会是网络原因导致的. 相关代码概括如下:requests.adapters.DEFAULT_RETRIES = 5response = requests.ge...
用python代码将tiff图片存储到jpg的方法.zip_jpeg_python_python图片存储_tiff
09-24
在图像处理领域，有时我们需要将高保真度的TIFF（Tagged Image File Format）图片转换为更常见的JPEG（Joint Photographic Experts Group）格式。TIFF格式通常用于专业摄影和扫描，因为它支持多层、无损压缩和丰富的...
ArcGIS-Python.zip_arcgis python_arcgis script_arcgis 工具_gis添加脚本_
09-19
本文将深入探讨如何利用Python在ArcGIS中添加脚本工具，以及这些工具在实际工作中的应用。 首先，`ArcGIS Python.zip`是一个包含关于ArcGIS与Python结合使用的资源包。`ArcGIS Python.pdf`很可能是这份资料的主要...
Python-2.7.12.tar.zip_Python安装包_python 2.7_python-2.7.12_pythont
07-14
Python-2.7.12.tar.xz安装包，官网下载纯净版
test.zip_python_下载图片
07-14
本案例中的"test.zip"是一个包含Python脚本的压缩文件，用于从互联网上下载百度图片并保存到本地文件夹。这个过程涉及到网络请求、HTML解析和文件操作等多个知识点。 首先，我们需要了解Python中的`requests`库，它...
Python requests下载超大文件/批量下载文件
Rick_M的博客
12-31 3332
使用 python 下载超大文件，直接全部下载，文件过大，可能会造成内存不足，这时候要使用 requests 的 stream 模式
图片显示一半怎么回事?
最新发布
ZJFYHT9的博客
02-09 2760
不知道小伙伴是否遇到过，刚刚上传的一个文件夹，有一多半的图片突然就变成了无法显示该图片
用Python校验下载文件的完整性（md5），游戏之类的大型文件
python_neophyte的博客
10-20 2057
对于大的文件，比如大型游戏，下载一般会带有md5值在下载包里面，md5是一种加密手段，在这里可以用来验证完整性，因为在下载大型文件的时候某个部分可能网络传输会出现错误，一个小文件坏了可能会导致游戏玩到中间出意外的bug或者干脆打不开游戏，重新下载要花费很多时间，所以还是值得下好先验证一下的。直接上代码 import hashlib import os f_path = input('Fil...
2020-09-27
weixin_46064684的博客
09-27 192
Date（日期）对象 Date对象分为两种情况： 1. 获取当前时间 2. 录入指定时间 注意：指定的对象会跟随1/2两种情况获取不同数据 var da = new Date(); //获取当前时间 console.log(da); //获取当前年 console.log(da.getFullYear()); //获取当前月(0-11) console.log(da.getMonth()+1); //获取当前日 console.log(da.getDate()); //获取当前小时 console.log(
Python检测数据不完整的JPG图片
kingroc的博客
01-29 6672
项目位置：OpenCV-Sample 代码位置：32-FindIncompleteJPG.py 有时候图片下载后就是这样的： 因为图片没有下载结束，仅仅显示了下载那一部分。网上方法很多，经过实践，我找到了一个较好的方法就是判断jpg文件结尾的标识。 代码如下： import os train_dir = './res/' def progress(percent, width=50): ...
程序批量下载图片不完整解决方案for Python
buyue
11-11 526
Python下载的图片不完整之解决方案Python基于pillow判断图片完整性
socket 简要总结
K_Hello的博客
08-23 452
先开启服务端，再开启客户端，否则Connection refused 如果客户端没有发送结束标识，如socket.shutdownOutput()或者socket.close()，服务端读取数据Connection reset，反之亦然 客户端Client的时候, 如果存在网络问题, 为了避免网络问题，造成客户端长时间等待, 此时要设置一个TimeOut clientSocket = new So...
通过文件头标识判断图片格式（转）
weixin_30563917的博客
10-13 302
转自：http://zjf30366.blog.163.com/blog/static/41116458201042194542973/ 图片的格式很多，一个图片文件的后缀名并不能说明这个图片的真正格式什么，那么如何获取图片的格式呢？我想到了几个简单但有效的方法，那就是读取图片文件的文件头标识。我们知道各种格式的图片的文件头标识识不同的，因此我们可以通过判断文件头的标识来识别图片格式。1.JPE...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值