解决RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously

最新推荐文章于 2024-08-12 17:06:09 发布
最新推荐文章于 2024-08-12 17:06:09 发布
阅读量210 收藏
点赞数 2
分类专栏： 代码问题汇总 文章标签： bug
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40914408/article/details/137006541
版权

问题描述

人脸重构代码跑到十几个人或者三十几个人就报错了

解决方法

在脚本中设置环境变量：

import os
os.environ["TORCH_USE_CUDA_DSA"] = "1"
或者：

终端：TORCH_USE_CUDA_DSA=1 python your_script.py

再努力努力一点
关注
专栏目录
Bug小能手系列(python)_13: RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might
走在深度学习前沿的小宋
10-30 8051
RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect. For debugging consider passing CUDA_LAUNCH_BLOCKING=1. 报错解决方案
RuntimeError: CUDA error: device-side assert triggered 问题的解决思路
热门推荐
Penta_Kill_5的博客
06-21 9万+
问题如下： RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect. For debugging consider passing CUDA_LAUNCH_BLOCKING=1.
RuntimeError: CUDA error: device-side assert triggered CUDA kernel
weixin_43918682的博客
11-17 588
报错：RuntimeError: CUDA error: device-side assert triggered CUDA kernel 看起来是 runtimeerror，指向性很模糊， 其实是 index溢出的问题， 比如你的loss_list,data,或者什么数组的 取值超出范围了， 特此记录，找了一天。。。。 哈！ ...
关于CUDA error: device-side assert triggered问题小技巧
我的技术栈碎碎念空间
08-12 220
耐心debug，但是在多线程代码中无法使用pdb来调试，听说可以关掉多线程或者不用gpu跑，就可以调试并显示出出错的代码位置了。遇到这种cuda的越界bug，可以优先查看是不是scatter代码处出现越界！去仔细检查mask的维度能否存得下topk的值。
（已解决）RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors
qq_43391414的博客
11-02 1万+
报错原因： 大概率是因为：代码有地方数组越界。盲猜是在交叉熵损失函数那里，反正我是在这里。 小概率是其他原因。不过，下面的解决办法是通用的。 解决办法： 先device=“cpu”，运行一遍，可以定位到数组越界的地方，修改代码。保证正确了之后再放在GPU上跑。 ...
解决： RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might be
python_innocent的博客
03-27 4297
主要可能出现的原因：1.传入传出的通道数不对；2.net最终全连接输出的class数目对不上labels；3. devices没有具体到某一个，而是一个list;4. 关了重新再连。建议先用一个单tensor如下，进行检验net的输入输出正确性，再放到dataset上。笔者首先尝试了前三个，结果还是报这个错，确认修改无误了把这玩意关了，再打开，正常运行了。
RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might be
u010674979的博客
05-07 189
在做分类模型代码训练的时候报错，这个是因为分类标签应该从0开始，我是从1开始的所以出问题了。比如第一类标签为0，第二类为2，。以此类推，第n类为N-1。分类标签应该为：label = 类别-1，修改后即可解决。
RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might be asynchronously reported at some other API call
最新发布
08-14
遇到 `RuntimeError: CUDA error: device-side assert triggered` 这个错误，通常意味着在执行CUDA（Compute Unified Device Architecture）相关的操作时，GPU计算单元检测到了一个条件不符合预期的情况。CUDA设备-...
RuntimeError:CUDAerror: device-side assert triggered CUDA kernel errors might be asynchronously rep
11-10
解决方法包括： 1. 减小batch_size。 2. 使用更小的模型或减少模型中的参数数量。 3. 将数据类型转换为更小的数据类型，例如从float32转换为float16。 4. 确保在使用GPU时只使用必要的显存，例如在训练时只保留必要...
RuntimeError: CUDA error: device-side assert triggered报错
ruichuang2的博客
07-08 534
在加载数据的时候Dataloader()加上drop_last=True，就好了。这个报错，依次排除了是不是因为数据包含nan；
解决RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors...CUDA_LAUNCH_BLOCKING=1
AI小白炼金术师
04-30 7万+
RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect.For debugging consider passing CUDA_LAUNCH_BLOCKING=1.
记录：RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronous
当代优秀青年的学习博客
06-20 294
可能是数据集类别标签错误定义导致的，在脚本文件中定义了五类，运行出错！2. voc_classes() 修改。1.在voc.py中修改。
运行时出现 RuntimeError: CUDA error: device-side assert triggered 错误提示
Catcher
12-22 2466
问题描述 原本运行时正确的，但是更换了分词器后突然就出现下面的错误提示： RuntimeError: CUDA error: device-side assert triggered 问题原因 很可能是数据越界问题，在NLP中很可能出现在词嵌入那块，比如词表一共有1000个词，那么输入的token id 的范围应该是0-999，如果你的输入token id 包含了1001，或者更大的值，那么在进行词嵌入的时候，嵌入矩阵无法索引到这么大的位置，就会出现越界问题。这个问题还可能出现在输出上，比如你的输出标签只有
RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously re
m0_74982304的博客
06-16 9037
解决办法：先测试自己的代码有没有代码上的问题，再考虑有没有cuda内存泄漏的问题，但内存泄漏基本上不会发生。在消除这两种可能后，可以在代码最前面加上下面这段代码，这个方法是gpt告诉我的，这也是报错中所提示的，但是并没有解决我的问题，各位老铁不妨一试。我用的是COCO2017数据集，这个数据集比较大，其中图片很多，我在我的dataloader中将所有图片都调成了[3,256,256]的大小。有意思的是，在训练最开始时一切顺利，到了几千张图片后就发生了上述的报错。到此为止跑了十几万张图片都没有再报错。
RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously
w05072的博客
03-09 304
非常长的错误报出来，都是这个问题，Assertion `t >= 0 && t < n_classes` failed，然后我百度了一下发现是损失函数哪里报错了，他有其他除了255和类别之外的标签值，然后我确认了所有训练集图片，发现都是对的。然后读取时也使用numpy.unique（label）发现没有问题，但是在minibatch加载时出现了254这个标签值，百思不得其解，然后！然后我发现确实是我没有读取到标签转换后的路径，然后改完路径之后发现，又又又又出现了这个问题，我人都懵了，一直找不到答案。
【已解决】RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronous
BetrayFree的博客
11-20 1万+
这篇较为详细的记叙了关于一个bug但又不是很麻烦的bug的解决过程，有部分过程没有记录下来，因为感觉对整个理解过程有影响，所以就挑了主要的过程进行记录。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值