RuntimeError: Cannot re-initialize CUDA in forked subprocess. 一个奇怪bug的奇妙解决方法

最新推荐文章于 2024-05-07 17:19:42 发布
最新推荐文章于 2024-05-07 17:19:42 发布
阅读量634 收藏
点赞数
文章标签： bug python pytorch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/YnullW/article/details/126905149
版权

原本代码是可以正常运行的，但是我改了输入之后就出现这个bug。

最后解决的方法也很神奇：原因是我的输入数据是以Tensor形式存储的，于是在读取的时候，不知道为什么导致了读取失败，并引发了多线程创建失败，最终报了这个错误。在将Tensor形式存储的训练数据改为array形式后，便一切正常了。

YnullW
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
解决api-ms-win-crt-runtime-l1-1-0.dll 丢失问题 绿色版 工具下载
07-27
提示api-ms-win-crt-runtime-l1-1-0.dll 丢失，安装这个小玩意就可以解决了
RuntimeError: Cannot re-initialize CUDA in forked subprocess解决方法之一
热门推荐
NLOS的博客
05-14 2万+
在程序最开始的地方加上： torch.multiprocessing.set_start_method(‘spawn’) 即可解决，如下第二行所示： if __name__=='__main__': torch.multiprocessing.set_start_method('spawn') args = config_parser().parse_args() data_loader = CreateDataLoader(args) train() 其他详细的解释和
cannot re-initialize CUDA in forked subproess
chumingqian的博客
04-02 1561
该问题描述了pytorch 中使用cuda 初始化时，　与DataLoader中使用num_worker 多进程，　这两者之间发生了冲突，根据错误提示，　在DataLoader 中使用该参数，并设置为spawn，　由于平时创建时，使用fork 创建的是子线程，　所以没有注意。
RuntimeError: Cannot re-initialize CUDA in forked subprocess.
最新发布
u013409979的博客
05-07 756
分析：multiprocessing启动方式有误。2、直接设置num_workers=0。
RuntimeError: Cannot initialize CUDA without ATen_cuda library.
yuuzhao的博客
06-13 9684
RuntimeError: Cannot initialize CUDA without ATen_cuda library. PyTorch splits its backend into two shared libraries: a CPU library and a CUDA library; this error has occurred because you are trying to use some CUDA functionality, but the CUDA library has
完美解决pytorch多线程问题：Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing
slamdunkofkd的博客
08-13 1万+
在pytorch，dataloader里设置了num_workers > 1的时候, 会出现这个错误。 一般网上https://blog.csdn.net/qazwsxrx/article/details/116806358解决方法，加上一行设定。 然而，我这里如果加上这行代码，会导致代码卡死在dataloader里面。 后面发现，代码里面设定了这样的几行。 if cuda: torch.set_default_tensor_type('torch.cuda.FloatTen.
Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you
CICI❤️的博客
11-11 2万+
RuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you must use the ‘spawn’ start method 问题出现的背景：在一个使用 cuda 对模型训练进行加速的程序中，想要使用多进程对模型测试进行加速。 解决的办法：因为我是比较熟悉 ...
arcgis-runtime-sdk-android-100.11.0.zip
04-25
这对于开发者来说是一份宝贵的资源，通过它，开发者可以深入理解ArcGIS Runtime SDK的功能、类库和方法，学习如何有效地使用各种GIS功能，如地图显示、图层管理、地理编码、空间查询等。 最后，"libs" 文件夹包含的...
RuntimeError: Cannot run the event loop while another loop is running(目前没有解决)
12-21
在Python的Tornado框架中，`RuntimeError: Cannot run the event loop while another loop is running` 是一个常见的错误，它表明你的代码试图在一个已经运行中的事件循环（Event Loop）内启动另一个事件循环。...
arcgis-runtime-sdk-android-100.8.0.zip
05-26
总之，ArcGIS Runtime SDK for Android 100.8.0是一个强大的开发工具，它为开发者提供了构建专业GIS应用所需的全部功能。通过深入学习和熟练使用这个SDK，开发者可以创建出满足各种需求的Android地理信息系统应用，...
cannot re-initialize CUDA in forked subprocess.To use CUDA with multiprocessing,you must use the ‘sp
weixin_39663060的博客
10-17 2900
cannot re-initialize CUDA in forked subprocess.To use CUDA with multiprocessing,you must use the 'spawn' start method.
多进程的子进程cuda使用报错: Cannot re-initialize CUDA in forked subprocess
qq_43199876的博客
12-13 3905
这个错误表明在使用CUDA时，你的代码在一个使用fork启动方法的多进程环境中，而CUDA不支持在fork的子进程中重新初始化。为了解决这个问题，你可以将多进程的启动方法改为使用spawn，这样就可以在子进程中重新初始化CUDA。在Python中，你可以使用multiprocessing模块中的Manager对象来共享资源，或者使用Pool对象来处理进程池中的任务。如果你仍然遇到问题，可能需要考虑其他方法，例如在主进程中初始化CUDA，并将相应的资源传递给子进程，以避免CUDA的重新初始化问题。
RuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you
江南蜡笔小新
09-20 5281
Pytorch报错: RuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you must use the ‘spawn’ start method 问题背景: 在dataloader中,使用了多线程处理数据,并且自定义了collate_func 解决方案: 如果不是特别大的消耗,可以取消调用该函数的cuda方法 如果一定要使用,Python 3 支持进程之间共享 CU
pythonRuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing
ResumeProject的博客
06-24 6194
fork spawn
uWSGI +Flask+torch Cannot re-initialize CUDA in forked subprocess
LP_Cong
02-10 2208
用uWSGI +Flask多进程多线程部署你的深度学习应用时，访问会报这样的错 "Cannot re-initialize CUDA in forked subprocess. To use CUDA with " RuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you must use the 'spawn' start method 查了半天，终于查
RuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you must use the 'spawn' start method
08-30
当您在使用CUDA进行多进程编程时，如果出现"RuntimeError: Cannot re-initialize CUDA in forked subprocess. To use CUDA with multiprocessing, you must use the 'spawn' start method"的错误提示，这是因为在...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值