pytorch训练网络 程序未报错 但是训练不动

已于 2022-08-06 15:59:35 修改
阅读量1.8k 收藏 2
点赞数 2
文章标签： pytorch
于 2022-08-06 15:57:32 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chasemoonnn/article/details/126196427
版权

由于是新环境 我一度以为是自己环境装错了 或者版本不对。但是torch is available 返回是ture 

这就不是环境问题 硬件问题 是程序错了 

最后终于发现是在解压数据包的时候 路径重复 有两层相同名字的路径 导致数据无法加载 出现的问题 如题watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETkBjaGFzZW1vb25ubg,size_20,color_FFFFFF,t_70,g_se,x_16

 发帖劝告自己禁忌数据加载路径问题

 

chasemoonnn
关注
进程在运行时卡住，显存分配了却不开始训练（卡在Using /home/faith/.cache/torch_extensions as PyTorch extensions root...）
u013250861的博客
06-10 690
最后仔细分析了以下，这个代码可能有一些问题，因为我之前是用四张3090在训练，中途停电就中断了一下，当我重新运行的时候使用的是两张卡就出现了这种情况，所以我怀疑可能是 .cache 的原因，导致了进程卡死（两次运行环境和配置不同引起的）），将这个文件夹删除即可，可以重新生成.cache文件夹，然后就不会有冲突啦。无论怎么重新运行程序，或者改变线程或者显卡都一直卡在这里，没有继续训练。一般会在用户主目录下会有一个自动生成的。文件夹（有可能是隐藏状态，需要你打开。
报错 The server socket has failed to bind to [::] Pytorch中DDP中断训练报错
计算机视觉
07-18 2713
报错如下。
Pytorch模型运行既无影响也无报错
belong_to_you的博客
11-18 1743
在跑Pytorch模型时，遇到模型训练既不显示训练过程又无报错问题，经过仔细排查发现：在进行运算时，有两个tensor的dtype类型不一致，分别是"float32"，“float64”，从而导致出现该问题。 解决方案，仅供参考！ ...
在正常训练时，训练没有报错，但一直无法执行
xi_xiyu的博客
11-01 867
目前推断出，BUG的大致方向。可以先进行以下尝试： 1. 升级mindspore，排除高版本影响 2. 设置batch_size = 1，排除机器性能影响。1、在正常训练时，训练没有报错，但一直无法执行，卡在一个步骤，查看显存情况，显存应该是够的。2、在加入pdb调试时，出现许多内存不足的错误。
windows 运行pytorch，在服务器上运行没有失败，但是什么都训练不出来。
THE XING
11-23 619
这个问题干扰我一天的进度了。 目前，终于找到！！！！ 没有报错的情况下，大概率是导入数据问题。我先说下我的具体的check步骤。 检查代码是否上传失败, 重新上传代码检查数据集上传是否正确检查代码数据集导入路径是否正确检查dataloader returen的data和label 最后发现os.listdir() 在ubuntu中是乱序读入数据的。。。所以模型data与label压根没配对。。。 ...
Pytorch eval不动 也不报错
AliceH1226的博客
08-22 781
单卡训练，训练到eval阶段很慢
vscode中选择pytorch虚拟环境中库没有导入报错，但是本机命令行下载过了
m0_74102824的博客
06-05 493
这个的原因是你的matplotlib库是下载到本机的python上但是pytorch框架上的是没有这个库的，此时应该打开ananconda promopt。然后pip install matplotlib就下载成功，这时候就发现这个库就下载到了pytorch的虚拟环境当中,代码也就不会报错了。然后输入activate pytorch转换成pytorch环境。这个时候你会发现matplotlib的库是下载过的，没法下载。
pytorch训练的维度不匹配的问题，解决办法
02-22 3492
扩展单张图片维度 import cv2 import torch image = cv2.imread(img_path) image = torch.tensor(image) print(image.size()) img = image.view(1, *image.size()) print(img.size()) # output: # torch.Size([h, w, c]) # torch.Size([1, h, w, c]) 或 import cv2 import numpy as
YOLO8训练遇到的各种报错及解决方案
最新发布
专注于图像领域，主要研究内容包括计算机视觉和深度学习，特别是在图像分类、目标检测和图像生成等方面有深入的研究和实践经验。
08-06 381
在Windows系统中，由于其多进程模型的特殊性，使用多进程加载数据时经常会遇到问题。在Linux系统中，通常可以使用多个子进程进行数据加载，但在Windows系统中必须将进程数设置为单进程来避免错误。此问题可能是当前使用的GPU正在被其他应用程序占用，导致显存不足。需要关闭其他应用程序以释放显存。这是由于Pillow版本问题，最新的10.0版本会产生上述问题。虽然调整后会在一定程度上影响模型的泛化能力并容易导致过拟合，但在必要时可以将。降低PyTorch和CUDA版本。使用device指定GPU。
为什么有GPU，使用pytorch训练的时候还是使用的CPU训练？
qq_46491311的博客
03-17 2021
为什么有GPU，使用pytorch训练的时候还是使用的CPU训练？前言`提示：因为使用pip进行安装，默认下载的就是cpu的版本：` ![在这里插入图片描述](https://img-blog.csdnimg.cn/1c4dc1d99bb84b1596685e4cd9b7497e.png)解决方法1、进入https://mirrors.bfsu.edu.cn/anaconda/cloud/pytorch/下载安装包2、选择对应的cuda版本进行下载如果不知道cuda的版本在控制台中输入nvidia-smi
pytorch预训练模型报错HTTPSConnectionPool(host='huggingface.co', port=443
10-08
这个错误通常是由于网络连接问题引起的。请确保你的网络连接正常，并检查是否可以访问 "huggingface.co" 的网站。...如果以上方法都无法解决问题，你可以考虑下载预训练模型的源文件，并手动加载到你的程序中。
pytorch加载数据时中途卡死且未报错
Chapter的博客
05-12 5036
问题详情 训练图像分割模型，数据包括原始图片和mask掩膜。使用enumerate函数获取数据序列时，中途卡死，不报错，CTRL+C强制退出后，提示下述信息： File "../engine/trainer.py", line 119, in training for i, batch_data in enumerate(tbar): File "../anaconda3/envs/fbrs/lib/python3.6/site-packages/tqdm/std.py", line
pytorch运行卡住，即不报错也不停止
weixin_43913077的博客
12-12 8319
程序运行到加载数据时卡住 for _, (support, query) in enumerate(eval_dataset) 把dataloader里的num_workers=0也没用，但是把eunmerate去掉有用了，但是运行到一半又停下了
pytorch训练在最后一个batch时卡住
weixin_44126589的博客
08-01 1630
需要手动输入ctrl+c程序才可继续运行，但不稳定。
为什么代码既不报错，也不运行。
m0_46410447的博客
05-22 233
复现CGAN代码的时候代码既不报错也不运行，train-out文件夹也是空的。也没有模型训练的效果。
python代码数据不报错也不出来
weixin_64311309的博客
11-23 2049
真 纯小白，就是写了一串爬取网页的代码，在pycharm运行不报错，但是也没有数据。求求求大佬帮帮QAQ，真的是简单的一个爬取网页的代码，也是第一次提问QAQ。
PyTorch 训练时中遇到的卡住停住等问题
热门推荐
yyywxk的博客
05-24 6万+
- 问题描述 使用 PyTorch 框架训练模型，训练第一个 epoch 时，在最后一个 batch 处卡死，卡了一天都没有动弹，而 CPU 和 GPU 都处于正常运行的状态，程序也没有报错，并且之前训练一直都是正常的。最终，只能通过 Ctrl+C 强制性暂停。如下图所示。 - 可能的原因 搜索文章发现，有人出现这种问题是和 cv2.imread 有关，用 OpenCV 的接口进行数据读取，而没有用 PIL，导致出现 OpenCV与Pytorch互锁的问题，关闭OpenCV的多线程即可解决问题1 2。 但
【Ubuntu】深度学习模型训练到一半卡死的解决方法
码农研究僧的博客
03-24 1466
【Ubuntu】深度学习模型训练到一半卡死的解决方法
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值