RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously

最新推荐文章于 2024-05-19 23:31:32 发布
最新推荐文章于 2024-05-19 23:31:32 发布
阅读量206 收藏
点赞数 2
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/w05072/article/details/136585796
版权

菜鸟踩坑记录

在复现CMX的代码的时候遇到了这个问题。后面就百度发现很多人都说是标签的问题。然后我发现确实是我没有读取到标签转换后的路径，然后改完路径之后发现，又又又又出现了这个问题，我人都懵了，一直找不到答案。因为我检查过标签没问题啊。然后我发现  在代码中加了os.environ['CUDA_LAUNCH_BLOCKING'] = '1'之后，他就能详细打印出来错误了！！！！！

非常长的错误报出来，都是这个问题，Assertion `t >= 0 && t < n_classes` failed，然后我百度了一下发现是损失函数哪里报错了，他有其他除了255和类别之外的标签值，然后我确认了所有训练集图片，发现都是对的。然后读取时也使用numpy.unique（label）发现没有问题，但是在minibatch加载时出现了254这个标签值，百思不得其解，然后！我发现代码有一个操作是gt-1  我真的气死，它把255也-1了！！！！！后来终于改好了！！！！

w05072
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
pytorch模型提示超出内存RuntimeError: CUDA out of memory.
01-20
跑模型时出现RuntimeError: CUDA out of memory.错误 查阅了许多相关内容，原因是：GPU显存内存不够 简单总结一下解决方法： 将batch_size改小。 取torch变量标量值时使用item()属性。 可以在测试阶段添加如下代码：...
解决RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors...CUDA_LAUNCH_BLOCKING=1
热门推荐
AI小白炼金术师
04-30 6万+
RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect.For debugging consider passing CUDA_LAUNCH_BLOCKING=1.
RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously re
m0_74982304的博客
06-16 8046
解决办法：先测试自己的代码有没有代码上的问题，再考虑有没有cuda内存泄漏的问题，但内存泄漏基本上不会发生。在消除这两种可能后，可以在代码最前面加上下面这段代码，这个方法是gpt告诉我的，这也是报错中所提示的，但是并没有解决我的问题，各位老铁不妨一试。我用的是COCO2017数据集，这个数据集比较大，其中图片很多，我在我的dataloader中将所有图片都调成了[3,256,256]的大小。有意思的是，在训练最开始时一切顺利，到了几千张图片后就发生了上述的报错。到此为止跑了十几万张图片都没有再报错。
【已解决】RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronous
BetrayFree的博客
11-07 2万+
写到这里突然感慨很多，到现在为止，记录自己的bug生涯应该快四个月了，可能是因为太小白的原因，所以看的人并不多，当然也有说技术博客不来csdn的说法，我身边的人几乎没有这上面的会员，相比其他平台的回馈机制，在这里是没有办法得到的，但我还是坚持写了很多并且有几篇优质博客的产生，这是很难得的。但遗憾的是我并不明白这说的是什么意思 ，因为就1234所提到的问题我这边是大概率不会存在的，所以这个内容来说就是肯定是软件的问题，但为什么是cuda内核引起的问题呢？如果硬件故障是可能的原因，考虑检查GPU的健康状态。
解决RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously
qq_40914408的博客
03-25 173
人脸重构代码问题
Python RuntimeError: thread.__init__() not called解决方法
09-22
主要介绍了Python RuntimeError: thread.__init__() not called解决方法,需要的朋友可以参考下
RuntimeError: Cannot run the event loop while another loop is running(目前没有解决)
12-21
代码如下: import tornado.ioloop import tornado.web from tornado.httpclient import HTTPClient, AsyncHTTPClient class MainHandler(tornado.web.RequestHandler): # 同步 def get(self): ...
解决pycharm导入numpy包的和使用时报错：RuntimeError: The current Numpy installation (‘D:\\python3.6\\lib\\site-packa的问题
01-21
标题用pycharm导入numpy包的和使用时报错：RuntimeError: The current Numpy installation (‘D:\python3.6\lib\site-packages\numpy\init.py 1.file→settings→project interpreter→+（建议用pychon3.6版本，我...
【Python】Python中变量或者函数加下划线‘_‘的含义
yangweipeng708的博客
05-14 676
理解这些约定可以帮助Python开发者编写更清晰、更Pythonic的代码，并理解其他Python代码中的命名习惯。）通常用来指示特定的编程约定或用法，这些约定主要关乎变量和函数的可访问性以及预期的使用范围。在Python中，变量或函数前面加一个下划线（
python数据分析numpy基础之intersect1d求数组交集
最新发布
sinat_34735632的博客
05-19 192
python的numpy库的intersect1d(x,y)函数，计算x和y的公共元素，并返回去重后的有序结果。相当于求两个数组中的交集，并且进行去重和排序。numpy.intersect1()查找两个数组的公共元素，并且返回去重后的有序结果。ar1，ar2：必选，列表、元组、数组；如果是多维则自动转一维数组；assume_unique：可选，bool，默认False，若为True则可以加快计算素材，此时ar1和ar2需为元素唯一的数组，否则结果不会去重；
windows11 Django环境安装
云深海阔专栏
05-15 162
3）在这个文件夹中使用manager.py和runserver命令运行开发 web 服务器。2）使用 django-admin 工具创建一个名为“mytestsite”的新框架站点。浏览器上访问http://localhost:800。2、windows10 虚拟环境设置。1、验证python和pip3环境。1）创建文件夹及项目目录。4）web浏览器上验证。3、安装Django。
python数据分析——时间序列
qq_74013365的博客
05-14 1994
时间序列是按照时间顺序排列的一系列随时间变化而变化的数据点或观测值。时间序列可以是离散的，例如每月的销售数据，也可以是连续的，例如气温和股票价格等。时间序列常用于预测和分析未来的趋势，例如经济增长、股票走势、天气变化等。时间序列分析是数据分析中的重要部分，它涉及到对随时间变化的数据进行研究，以揭示其内在规律、趋势和周期性变化。Python作为一种强大的编程语言，拥有众多的数据处理和可视化库，如pandasnumpymatplotlib和seaborn等，这些库在处理时间序列数据时表现出色。
【华为OD机试-C卷D卷-200分】 简易内存池【C++/Java/Python】
goldarmour的博客
05-14 162
请实现一个简易内存池,根据请求命令完成内存分配和释放。 内存池支持两种操作命令，REQUEST和RELEASE，其格式为： REQUEST=请求的内存大小 表示请求分配指定大小内存，如果分配成功，返回分配到的内存首地址；如果内存不足，或指定的大小为0，则输出error。 RELEASE=释放的内存首地址 表示释放掉之前分配的内存，释放成功无需输出，如果释放不存在的首地址则输出error。
Python slice() 使用方法及示例说明
ym62033的博客
05-15 197
处。
python EEL + vue3.js 简单示例
bigcarp的专栏
05-15 186
eel官方示例中暴露的js函数是全局函数，vue中的自定义函数作用域通常都是组件范围内。要让eel.js调用，需要将其升为全局可用。一般方法有 app.config.globalProperties 或 mixin等。
全国大学生数学建模竞赛【集训营E题】丨 近5年赛题实现，模拟参赛体验
tipdm0526的博客
05-14 148
全国大学生数学建模竞赛【集训营E题】
Python代码：七、小数化整数
m0_61834747的博客
05-16 209
日常生活中我们会遇到很多小数，但是有的人不喜欢小数，因此会用四舍五入的方式将其去掉。在Python中我们更加简单，可以利用强制类型转换将小数转变成整数，请你试一试。
RuntimeError:CUDAerror: device-side assert triggered CUDA kernel errors might be asynchronously rep
11-10
这个错误通常是由于GPU显存不足导致的。解决方法包括： 1. 减小batch_size。 2. 使用更小的模型或减少模型中的参数数量。...5. 确保CUDA版本与PyTorch版本兼容。 6. 确保GPU驱动程序已正确安装并更新到最新版本。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值