问题解决：CUDA error: an illegal memory access was encountered

最新推荐文章于 2024-03-02 15:36:43 发布
最新推荐文章于 2024-03-02 15:36:43 发布
阅读量422 收藏
点赞数
文章标签： pytorch bug python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/M20010104hanxiao/article/details/131810486
版权

这个问题真的是非常烦人，在自己目前的项目里经常出现，而且报错位置不止一处，非常没有规律。看了网上很多经验贴，最后自己是这么解决的：

所有关于模块（包括网络架构、数据集的数据和标签、损失函数）转移到CUDA上的语句从.to(device)全部改成.cuda()，就奇迹般的好了

修改前
修改后

Jay-Codeman
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
RuntimeError: CUDA error: an illegal memory access was encountered
m0_56836274的博客
03-31 298
我在跑深度学习模型。其中卷积用CUDA写的。数据集是cifar10。在运行了1个epoch后，就报错：RuntimeError: CUDA error: an illegal memory access was encountered。这个错误是在调用loss.backward()方法时出现的。在网上看了很多方法，有说改小batch_size的，有说让input_data和input_label都放在GPU上的，有说升级pytorch版本的,有说换GPU卡的…玄乎！
[彻底解决]CUDA error: an illegal memory access was encountered(CUDA错误 非法访问内存)
热门推荐
Gentleman的博客
06-23 3万+
先说一下在网上看到的问题： 第一种可能你的程序涉及到并行计算，但你只有一张卡，因此只要将程序涉及到并行计算的部分改成单卡即可 找找有没有 torch.nn.DataParallel() 第二种一部分数据或者模型在cpu上，另外一部分在gpu上。 PS：第二种和第一种可以强行 os.environ["CUDA_VISIBLE_DEVICES"]为指定ID 第三种CUDNN版本不对？感觉这种可能比较小 然后说一下我是怎么解决的： 最关键的，也是我遇到的问题，这个错误没有表明和显存溢出存在着联系，因为显存溢出
讲解CUDA error: an illegal memory access was encountered
牛肉胡辣汤
12-24 6014
最后，将处理后的图像数据从 GPU 内存中复制回主机内存，并显示处理后的图像。通过正确的错误定位和排查方法，我们可以定位出现这个错误的位置，并通过解决方法和预防措施来解决和避免这个问题的发生。同时，了解和熟悉CUDA的错误检查机制和工具，也是提高代码质量和性能的重要手段。这个错误常常涉及到对GPU内存访问的问题，通常是由于访问了未分配或已释放的内存导致的。它能够检测到应用程序中的潜在问题，并提供详细的错误报告，包括错误类型、错误位置和堆栈跟踪信息，帮助开发者快速定位和解决问题。
cuda error: an illegal memory access was encountered 解决办法
bluewhalerobot的博客
07-07 815
用cuda-memcheck工具获取进一步的错误信息，保证libcudnn库版本和cuda库版本一致。
RuntimeError: CUDA error: an illegal memory access was encountered 解决思路
yyywxk的博客
09-09 7814
RuntimeError: CUDA error: an illegal memory access was encountered GPU负载
CUDA Error: an illegal memory access was encountered
火星人
03-21 2万+
1.基本配置情况： 显卡：RTX 2080 驱动：NVIDIA-Linux-x86_64-440.64.run CUDA版本：10.2.89 Cudnn版本：cudnn-10.2-linux-x64-v7.6.5.32 Opencv版本：3.4.6 2.按照官网程序测试YOLO V3，报错如下： CUDA Error: an illegal memory access was encounter...
JS提示：Uncaught SyntaxError: Unexpected token ILLEGAL错误的解决方法
10-21
在开发过程中，遇到这类语法错误时，可以遵循以下步骤来定位和解决问题： 1. **检查代码**：首先，仔细查看报错行附近的代码，寻找可能的语法错误，如缺少的括号、引号或分号。 2. **使用开发工具**：大多数现代...
php iconv() : Detected an illegal character in input string
01-20
上线后报一堆这样的错：iconv() : Detected an illegal character in input string考虑到GB2312字符集比较小，换个大的吧，于是改成GBK：$str = iconv(‘UTF-8’, ‘GBK’, unescape(isset($_GET[‘str’])?...
解决java.security.InvalidKeyException: Illegal key size
12-08
在Java编程环境中，有时会遇到一个常见的错误："java.security.InvalidKeyException: Illegal key size"。这个错误通常是由于Java安全策略的限制导致的，尤其是当你尝试使用超过默认限制的密钥长度（例如，超过128位...
【debug】报错RuntimeError: CUDA error: an illegal memory access was encountered
向上生长的程序媛的博客
08-07 2791
mmseg工程报错RuntimeError: CUDA error: an illegal memory access was encountered解决。
非法的内存访问 RuntimeError: CUDA error: an illegal memory access was encountered
weixin_46124467的博客
11-28 5786
跑一些大模型 、 别人的项目、github上的代码 编译正常通过，运行的时候随机报错(某个epoch就因为报错停止了) 然而使用CPU跑却可以 报错 RuntimeError: CUDA error: an illegal memory access was encountered CUDA kernel errors might be asynchronously reported at some other API call, so the stacktrace below might be ...
an illegal memory access was encountered问题解决方法之一
lukas_ten的博客
11-17 5360
作为一个刚入门深度学习的新手，我在把一个深度学习模型嵌入到另一个大的框架里面时，遇到了这个问题，耗时一天半才解决这个问题 我遇到这个问题是把数据和模型送入gpu和cpu的问题，把原本送入cpu的数据在gpu中计算，才导致上面出现的内存非法占用问。我的本意是把模型送入gpu中计算，代码是这样写的 self.modal.device = torch.device('cuda') 但是调试发现，模型输出的数据device显示是在cpu上，所以造成是内存非法占用，然后我把模型送到GPU上改成以下语句，解决了错误
cuMemFreeHost failed: an illegal memory access was encountered
惊魂呓梦的博客
08-16 333
初始版本的max_workspace_size设置为 1<<30 ，也就是给出模型中任一层能使用的内存上限为 1GB，增加为2GB后，可以正常完成推理。
CUDA error: an illegal memory access was encountered
jacke121的专栏
05-31 8388
pytorch报错：CUDA error: an illegal memory access was encountered 报错原因： 这种报错的本质就是模型model、输入数据（input_image、input_label）没有全部移动到GPU（cuda）上。 **温馨提示：**debug时一定要仔细检查是否每一个输入变量以及网络模型都移动到了GPU上，我一般报错都是因为漏掉了其中一两个。 解决方法： 将model、input_image、input_label全部移动到cuda上，实...
RuntimeError: CUDA error: an illegal memory access was encountered的解决方法
weixin_44320558的博客
12-07 2583
在Transformer模型中遇到这个问题 参考方法：https://www.jianshu.com/p/e1a0b14916f9 原因 class Add_Norm(nn.Module): def __init__(self): super(Add_Norm, self).__init__() self.dropout = nn.Dropout(config.p) def forward(self, x, sub_layer, **kwargs):
1:RuntimeError: CUDA error: an illegal memory access was encounteredCompile with TORCH_USE_CUDA_DSA`
最新发布
qq_44770238的博客
03-02 1432
报错显示不精确，按照软件推荐方法设置set TORCH_USE_CUDA_DSA=1，设置之后就会报错详细的问题，从而进行修改。
RuntimeError: CUDA error： an illegal memory access was encountered
10-19
RuntimeError: CUDA error: an illegal memory access was encountered通常是由于GPU内存不足或者访问了不存在的内存地址导致的。这个错误通常会在训练深度学习模型时出现。解决这个问题的方法包括： 1.减小batch_...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值