模型训练出现 OSError: image file is truncated (28 bytes not processed)

最新推荐文章于 2024-05-10 01:14:20 发布
原创 最新推荐文章于 2024-05-10 01:14:20 发布 · 1.6k 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python #机器学习 #人工智能 #深度学习 #tensorflow

在进行模型训练时遇到OSError: image file is truncated错误，通常是由于数据集中的图片文件不完整。处理方法包括忽略错误继续训练或修复图像。本文提供了一种简单方案——在代码中设置错误处理，跳过不完整的图片，以确保训练的连续性。

在训练模型的时候，我们有可能会出现

OSError: image file is truncated (28 bytes not processed)这样的错误，

造成这种错误的原因是数据集的问题，出现了数据缺失
eg:
在这里插入图片描述
出现这个问题呢，有两种方法：

  1. 跳过错误，抛弃本张图片，继续下面的训练
  2. 对图像进行补全

这里我们使用最简单的方法—抛弃数据，继续训练

我们在代码的最开头添加如下代码：
最开头
最开头
最开头
因为它最保险


from PIL import ImageFile
ImageFile.LOAD_TRUNCATED_IMAGES = True

-------->>>

最低0.47元/天 解锁文章
OSError: image file is truncated (4 bytes not processed)
weixin_42578627的博客
03-16 1337
项目场景： labeme打开图像报OSError: image file is truncated (4 bytes not processed)错误： 例如：使用labelme标注文件时打开图片闪退，之后shell界面报OSError: image file is truncated (4 bytes not processed) 问题描述： 1.我们发现这个问题是图片格式出问题了，用opencv打开图片查看图片格式，有问题的图片格式是object，没有问题的图片格式是uint8： 2.直接对有问题的图
解决批量图像处理过程中：OSError: image file is truncated
sunny
04-20 9080
1：问题描述： 在进行图像处理过程中，批量读取图像进行处理的时候，遇到中间某个图像损坏，导致处理无法进行下去。并伴随着OSError: image file is truncated的异常。 字面自已，图像被截断，损坏，无法完成正常的读取。 2：问题分析 错误发生的代码位于python的site-package文件夹内，代码文件为ImageFile.py。具体代码： import io import struct import sys import warnings from ...
mmdetection 训练时 OSError: image file is truncated (** bytes not processed) 问题解决
chhj_292
04-02 1286
使用 mmdetection 框架进行 swin transformer 模型训练时，训练到一定的步骤会报错“OSError: image file is truncated (** bytes not processed)”且训练中断和进程退出。这里有一个修复思路：https://blog.csdn.net/qq_34097715/article/details/109646082。如果增加配置：color_type=‘unchanged’，pillow 尝试用 numpy 读取图片，依然会报错。
OSError: image file is truncated (28 bytes not processed)
weixin_30698527的博客
08-16 437
图像文件放在linux服务器上，加载的时候报错，解决办法： 在代码中添加两行 from PIL import ImageFile ImageFile.LOAD_TRUNCATED_IMAGES = True 转载于:https://www.cnblogs.com/yqpy/p/11362350.html...
OSError: image file is truncated与PIL.UnidentifiedImageError: cannot identify image file的解决方案
weixin_33538887的博客
08-23 2868
错误OSError: image file is truncated，又或者是PIL.UnidentifiedImageError: cannot identify image file的解决方案。
OSError:Image file is truncated (28 bytes not processed)的解决办法
genous110的博客
07-25 1408
解决的办法，在代码中添加下面两行代码 from PIL import ImageFile ImageFile.LOAD_TRUNCATED_IMAGES = True
OSError: image file is truncated (71 bytes not processed)
GeneralJing的专栏
06-10 1443
在加载训练图像数据，准备训练模型的时候，报错如下： OSError: image file is truncated (71 bytes not processed)
【Bug解决】OSError: image file is truncated (7 bytes not processed)
学习 & 分享 ~
03-18 5453
PyTorch 代码，使用 MS COCO 数据集训练时报错： 报错内容：图像损坏，无法读取，具体就是括号里提示的，7 bytes 无法读取。报错原因：将一张正常的 格式图片用二进制打开，遵循的格式规则是图片开头为 ，图片结尾为 ，如果图片数据遭到损坏，通常是尾部的 不见了。最好是能将损坏的数据修复，针对 MS COCO 的训练数据， 这张图片已经损坏了，在https://msvocds.blob.core.windows.net/images/262993_z.jpg 可以下载到正常的图片，替换掉损坏
OSError: image file is truncated
m0_57201352的博客
05-11 629
python
OSError: image file is truncated (54 bytes not processed)
m0_46268174的博客
04-19 490
在代码中添加 from PIL import ImageFile ImageFile.LOAD_TRUNCATED_IMAGES = True （个人学习记录）
OSError: image file is truncated (13 bytes not processed)
sunny
07-02 712
解决办法： 添加： from PIL import ImageFile ImageFile.LOAD_TRUNCATED_IMAGES = True 就可以解决了
OSError: image file is truncated (1 bytes not processed)
dsnds03的博客
11-11 973
OSError: image file is truncated (1 bytes not processed) 在做深度学习图像分类任务时，偶然发现过这个错误，之前采取网上通用的增加 from PIL import ImageFile ImageFile.LOAD_TRUNCATED_IMAGES = True 的方式可以进行错误屏蔽。但这次在做模型测试时添加了这段代码依然无法解决这个问题。 经过调试发现可以尝试将代码中的 Dataloader模块里 num_workers设置进行修改，我直接设置为0，
OSError: image file is truncated (7 bytes not processed)报错
糖炒Li儿的博客
04-02 2074
OSError: image file is truncated (7 bytes not processed)报错
OSError: image file is truncated (36 bytes not processed)解决方案
前行居士
05-10 835
【代码】OSError: image file is truncated (36 bytes not processed)解决方案。
OSError: image file is truncated (1 bytes not processed)解决方案
qq_39474168的博客
09-14 1941
今天用paddle的框架做训练时遇到的一个问题： W0914 13:56:32.486941 21077 device_context.cc:404] Please NOTE: device: 3, GPU Compute Capability: 7.5, Driver API Version: 10.2, Runtime API Version: 10.1 W0914 13:56:32.492003 21077 device_context.cc:422] device: 3, cuDNN Version
OSError: image file is truncated (74 bytes not processed)
最新发布
08-27
在处理图像文件时，如果文件损坏或被截断，使用 Python 的图像处理库（如 `PIL` 或 `Pillow`）可能会抛出 `OSError: image file is truncated` 错误。这种错误通常表示图像文件的完整性存在问题，例如文件未完全下载...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值