训练yolov8出现RuntimeError: DataLoader worker (pid(s) 16784, 11936, 24560) exited unexpectedly错误

最新推荐文章于 2024-12-16 09:26:26 发布

JUN97

最新推荐文章于 2024-12-16 09:26:26 发布

阅读量1.6k

点赞数 7

文章标签： YOLO python

本文链接：https://blog.csdn.net/muzilihhh/article/details/134320995

版权

首先找到代码中的ultralytics/cfg/default.yaml文件，如下所示

找到里面的batch和workers参数，将其分别调为1和0，再次终端训练即可，如果没有训练到指定轮数就停止，将default.yaml文件中的patience参数调大即可。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

JUN97

关注关注

7
点赞
踩
10

收藏

觉得还不错? 一键收藏
2
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

YOLOv8: RuntimeError(‘DataLoader worker (pid(s) {}) exited unexpectedly‘.format(pids_str)) from e

joe8910的博客

05-27

1007

1、分配python安装目录内存空间，我python环境默认安装在C盘，在分配之前，我C盘的内存只有70G左右，使用“分区助手”把其它硬盘的多余空间分配给C盘，如下图所示，打开分区助手，选择内存空间比较多的盘，这里我选择“F盘”，点击左侧”分配空闲空间“，点击下拉框，选择要分配的盘，这里我选择”C盘“（python安装的目录）分配之后，我的C盘空间由原来只剩下70G，变成了185G。2、空间分配完成后，重启电脑，再尝试YOLOv8训练，看是否还会报错，我的还是会报错误二，页面文件太小错误。

【Bug】Pytorch RuntimeError: DataLoader worker (pid(s) 15904) exited unexpectedly

集电极

08-05

1335

这是由于多线程加载数据使用不当使用的错误，因此可以设置为单线程即可，num_workers 不设置或设置为。意思是，这是运行时错误，是由于在主进程完成初始化之前试图启动了新的进程导致的错误。将涉及dataloader 的代码放置在。在使用 PyTorch 的。下运行，修改代码如下。

2 条评论您还未登录，请先登录后发表或查看评论

raise RuntimeError(f‘DataLoader worker (pid(s) {pids_str}) exited unexpectedly‘) from e RuntimeError

qq_42042528的博客

12-16

996

raise RuntimeError(f'DataLoader worker (pid(s) {pids_str}) exited unexpectedly') from e RuntimeError: DataLoader worker (pid(s) 39164, 35716) exited unexpectedly

YOLOv8的dataloader，数据增强--源码解析

xiefanmin的博客

12-30

8510

文件：ultralytics/engine/trainer.py属于基类： class文件：ultralytics/models/yolo/detect/train.py属于子类：class。

yolov8运行报错，num_workers 位置

weixin_43860261的博客

02-28

2025

搜索yolov8项目中build.py文件，在windows上运行yolov8时报错。找到num_workers=0 设置为0.linux 可以使用多个子进程加载数据。Windows只能是单进程。

raise RuntimeError(f‘DataLoader worker (pid(s) {pids_str}) exited unexpectedly‘) from e Runtime

qq_53821535的博客

11-25

1085

最近新入手了一个二手的macbook air m1 准备测试一下m1应对机器学习的能力找到一位老哥的文章以及代码进行测试： https://blog.csdn.net/KaelCui/article/details/106184158运行范例代码之后出现如下错误提示： raise RuntimeError(f’DataLoader worker (pid(s) {pids_str}) exited unexpectedly’) from e RuntimeError: DataLoader worker

[YOLOv8] 问题分析与解决 - RuntimeError: An attempt has been made to start a new process ...bootstrapping ..

老狼工作室的博客

12-14

4329

本文分析和解决了下面的异常： RuntimeError: An attempt has been made to start a new process before the current process has finished its bootstrapping phase.

RuntimeError: DataLoader worker (pid(s) 9528, 8320) exited unexpectedly

01-06

RuntimeError: DataLoader worker (pid(s) 9528, 8320) exited unexpectedly 去网上搜教程，说是在loader定义的时候多进程的参数指定的问题，我的loader定义如下 loader = Data.DataLoader( dataset=torch_dataset,...

RuntimeError: DataLoader worker (pid(s) 8548, 6916) exited unexpectedly

VegetableofDog的博客

05-12

9324

深度学习，Lenet函数的实现，神经网络，

YOLOv8:raise RuntimeError(‘DataLoader worker (pid(s) {}) exited unexpectedly‘.format(pids_str)) from

一名混沌的大学生

07-15

857

2、页面文件太小，无法完成操作，修改虚拟内存，要修改python安装硬盘的虚拟内存，如果python环境安装在C盘，那就修改C盘，如果安装在D盘，那就修改D盘;使用了该方法之后，能解决问题二，但训练了一轮之后，会报问题一的错误，还是没能彻底解决问题；1、将num_workers修改为0，但我在程序里面，把所有能修改的num_workers变量都修改了一遍，还是解决不了；OSError: [WinError 1455] 页面文件太小，无法完成操作。

Yolov5刚开始出现的报错RuntimeError: DataLoader worker (pid(s) 8548, 6916) exited unexpectedly

2202_75422333的博客

09-14

566

1、先将num_workers=0，会出现新的报错2、解决新的报错。

Yolov8 报错解决:The “freeze_support()“ line can be omitted if the program is not going to be frozen

08-01

2195

Yolov8 报错解决:The "freeze_support()" line can be omitted if the program is not going to be frozen

YOLOv8源码修改（1）- DataLoader增加负样本数据读取+平衡训练batch中的正负样本数

qq_40387714的博客

05-17

3593

实际工程中，仅仅使用采集到的数据（或者说单一的数据集）进行训练，会导致网络在真实未知的场景下，极其容易发生误检。因此，网络需要见识不同的场景数据才更具有鲁棒性。

RuntimeError(‘DataLoader worker (pid(s) {}) exited unexpectedly‘.format(pids_str)) from e

始于足下

08-31

3046

dataloader

成功解决：RuntimeError: DataLoader worker (pid(s) XXX) exited unexpectedly

jerry zhang的sally wu

12-19

2万+

num_workers是用来指定开多进程的数量，默认值为0，表示不启用多进程。将num_workers改为0即可，0是默认值。

YOLOV8逐步分解(6)_模型训练初始设置之image size检测batch预设及dataloder初始化

yueguang8的博客

05-27

3123

本章将讲解yolov8训练初始化过程中image size检测、batch预设及dataloder初始及其他们功能的讲解。

YOLOv8 代码部署

qq_45831414的博客

11-29

5657

获取YOLOv8代码压缩包。

YOLOv8训练参数详解

最新发布

04-03

### YOLOv5 中 DataLoader 进程意外退出问题分析在使用 YOLOv5 训练模型时，如果遇到 `RuntimeError: DataLoader worker (pid(s) ...) exited unexpectedly` 错误[^1]，这通常表明数据加载器的工作线程因某些原因崩溃或无法正常运行。以下是可能的原因及其解决方案： #### 可能原因 1. **内存不足** 如果 GPU 或 CPU 的可用内存不足以支持批量大小（batch size）和工作线程数量（workers），可能导致进程被强制终止。 2. **图像路径错误** 数据集配置文件中可能存在无效的图像路径或损坏的图片文件，导致读取失败并引发异常。 3. **多线程冲突** 当设置较高的 workers 数量时，在 Windows 系统上可能会因为多线程处理不当而出现问题。 4. **Python 版本不兼容** Python 不同版本之间可能存在一些细微差异，尤其是涉及多线程或多进程操作的部分。 --- #### 解决方案 ##### 方法一：调整 batch 和 workers 参数尝试减少批处理大小（batch size）以及降低数据加载器的工作线程数（workers）。可以通过修改配置文件或将参数传递给训练脚本来实现此目的。例如： ```python !python train.py --img 640 --batch 1 --epochs 50 --data dataset.yaml --weights yolov5s.pt --workers 0 ``` 上述命令将批处理大小设为 1 并禁用了多线程模式（workers=0）。这种做法可以有效避免由于资源争用引起的崩溃[^4]。 ##### 方法二：验证数据集完整性检查数据集中是否存在损坏的图片或其他非法文件。可以编写一个小脚本来遍历整个数据集并检测潜在问题： ```python import cv2 import os def check_images(folder_path): for root, _, files in os.walk(folder_path): for file_name in files: if not file_name.lower().endswith(('.png', '.jpg', '.jpeg')): continue img_path = os.path.join(root, file_name) try: _ = cv2.imread(img_path) except Exception as e: print(f"Invalid image found: {img_path}, Error: {e}") check_images("/path/to/dataset/images") ``` ##### 方法三：更新依赖库确保所使用的 PyTorch 和 torchvision 库是最新的稳定版本。旧版库可能存在已知 bug 导致此类问题发生。安装最新版本的方法如下： ```bash pip install torch torchvision torchaudio --upgrade ``` ##### 方法四：切换至单线程调试模式为了进一步定位具体问题所在，可以在调试阶段完全关闭多线程功能。通过以下方式临时更改环境变量来达到这一目标： ```bash export OMP_NUM_THREADS=1 export MKL_NUM_THREADS=1 ``` 或者直接在代码开头加入这些设置语句： ```python import os os.environ['OMP_NUM_THREADS'] = '1' os.environ['MKL_NUM_THREADS'] = '1' ``` --- ### 总结通过对以上几种方法逐一排查，应该能够成功解决 `RuntimeError: DataLoader worker (pid(s) ...) exited unexpectedly` 的问题。优先考虑调整 batch 和 workers 参数作为初步措施；其次仔细核查数据源质量以排除外部干扰因素；最后确认软件栈各组件均处于良好状态从而保障整体稳定性。