RuntimeError: CUDA error: device-side assert triggered报错

最新推荐文章于 2024-04-10 19:53:54 发布
最新推荐文章于 2024-04-10 19:53:54 发布
阅读量391 收藏 1
点赞数
文章标签： 深度学习 python 机器学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ruichuang2/article/details/131616823
版权

Traceback (most recent call last):
  File "trainer_2.py", line 284, in <module>
    trainer.train_model(
  File "trainer_2.py", line 235, in train_model
    ) = self.model_pred(dataloader=dataloader_eval)
  File "trainer_2.py", line 101, in model_pred
    out_var = self.mymodel(
  File "/home/ruichuang/anaconda3/envs/graphino/lib/python3.8/site-packages/torch/nn/modules/module.py", line 1130, in _call_impl
    return forward_call(*input, **kwargs)
  File "/home/ruichuang/ENSO_predict/2023_7_5/Code_of_3D-Geoformer_series/Code_of_3D-Geoformer_myloader_mon2/Code/Geoformer.py", line 94, in forward
    en_out = self.encode(predictor=predictor, in_mask=in_mask, predictor_y=predictor_y[:,:self.mypara.input_length,:])  # (2,510,12,256)
  File "/home/ruichuang/ENSO_predict/2023_7_5/Code_of_3D-Geoformer_series/Code_of_3D-Geoformer_myloader_mon2/Code/G

最低0.47元/天 解锁文章
芮之凡
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
完美解决-RuntimeError: CUDA error: device-side assert triggered
jh035的博客
11-23 5939
epoch： 1 的第 0 个inputs torch.Size([8, 3, 224, 224]) labels tensor([4, 4, 3, 4, 4, 4, 4, 4])epoch： 1 的第 4 个inputs torch.Size([8, 3, 224, 224]) labels tensor([3, 4, 2, 4, 1, 1, 4, 1])
解决RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors...CUDA_LAUNCH_BLOCKING=1
热门推荐
AI小白炼金术师
04-30 6万+
RuntimeError: CUDA error: device-side assert triggeredCUDA kernel errors might be asynchronously reported at some other API call,so the stacktrace below might be incorrect.For debugging consider passing CUDA_LAUNCH_BLOCKING=1.
yolo报错RuntimeError: CUDA error: device-side assert triggered
最新发布
m0_64913373的博客
04-10 743
此问题是由于数据集配置有误，导致类别id与yaml文件中的索引号匹配不上导致的，这里我以为hrsid数据集为例，由于该数据集在标注时默认从1开始索引，这与yolo从0开始的不匹配，因此如果直接使用通用的coco2yolo脚本进行转换后，进行训练就会报错。该数据集只有一个类别，但索引却是1，因此我们需要修改coco2yolo脚本，找到你的脚本对应的id部分。这时候我们打开转换后的任意一个标注文件。其他的脚本大同小异，修改后开始炼丹！
关于yolo训练报错记录：CUDA error: device-side assert triggered
weixin_45989883的博客
08-24 583
训练问题记录
RuntimeError: CUDA error: device-side assert triggered
weixin_48915167的博客
02-11 1598
环境：两张显卡有两个人在用，都是用的双卡训练，也不知道是否与多人公共显卡有关，因为之前自己用的时候没发生过这种错误。运行了14个epoch之后第15个epoch才报错，看报错像是计算loss的时候数组越界了，没找到问题原因。
AICITY2023_track5 多目标跟踪YOLOV8+strongSORT，报错：RuntimeError: CUDA error: device-side assert triggered
zj_xd的博客
07-14 439
不然会报错：RuntimeError: CUDA error: device-side assert triggered。注意：标签是从0开始，因为官方给的标签是从1开始的，所以要提前处理一下标签数据。这个bug主要是标签不匹配的原因，报错的地方未必是真正有问题的地方。
pytorch模型提示超出内存RuntimeError: CUDA out of memory.
01-20
跑模型时出现RuntimeError: CUDA out of memory.错误 查阅了许多相关内容，原因是：GPU显存内存不够 简单总结一下解决方法： 将batch_size改小。 取torch变量标量值时使用item()属性。 可以在测试阶段添加如下代码：...
yolov5-3.1版本训练时可能会报错及修改方法汇总
08-20
一、 RuntimeError: a view of a leaf Variable that requires grad is being used in an in-place operation 在 yolov5-3.1 版本训练时，可能会出现上述报错。这是因为 PyTorch 中的叶变量（leaf Variable）要求 ...
Vue项目报错：Uncaught SyntaxError: Unexpected token <
10-17
主要介绍了Vue项目报错：Uncaught SyntaxError: Unexpected token <，在引入第三方依赖的 JS 文件时，遇到的一个问题，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
解决pycharm导入numpy包的和使用时报错：RuntimeError: The current Numpy installation (‘D:\\python3.6\\lib\\site-packa的问题
01-21
标题用pycharm导入numpy包的和使用时报错：RuntimeError: The current Numpy installation (‘D:\python3.6\...3.现在简单用numpy还是会报错：RuntimeError: The current Numpy installation (‘D:\python3.6\lib\site
Python RuntimeError: thread.__init__() not called解决方法
12-24
RuntimeError: thread.__init__() not called 复制代码 代码如下: class NotifyTread(threading.Thread):   def __init__(self, params):   threading.Thread.__init__(self) #here。。。。。。   self....
【RuntimeError: CUDA error: device-side assert triggered】问题与解决
ball is life
07-09 5万+
RuntimeError: CUDA error: device-side assert triggered以及Assertion `index >= -sizes[i] && index < sizes[i] && "index out of bounds"` failed.BUG解决思路
解决： RuntimeError: CUDA error: device-side assert triggered CUDA kernel errors might be
python_innocent的博客
03-27 4195
主要可能出现的原因：1.传入传出的通道数不对；2.net最终全连接输出的class数目对不上labels；3. devices没有具体到某一个，而是一个list;4. 关了重新再连。建议先用一个单tensor如下，进行检验net的输入输出正确性，再放到dataset上。笔者首先尝试了前三个，结果还是报这个错，确认修改无误了把这玩意关了，再打开，正常运行了。
解决报错：RuntimeError: CUDA error: device-side assert triggered
qq_50000922的博客
06-25 1万+
如果下方有提：For debugging consider passing CUDA_LAUNCH_BLOCKING=1.我们可以在代码中import os下添加“os.environ[‘CUDA_LAUNCH_BLOCKING’] = “1””，这样可以保证报错信息提示的位置是准确的。我遇到的问题最终显示是在代码的scatter_函数（torch）中存在映射维度不匹配的情况，映射的目标index有0,1两个位置，但被映射对象对应维度上只有1维，因此报错。
语义分割ADE20K DDP训练Bug
芒果干的博客
12-07 1695
在用DDP训练ADE20K数据集时，调试的时候感觉没问题，但是在真的训练的时候报了以下错误 在网上找了半天，主要问题在于你的实际训练类别和数据集ADE20K的类别不符合。默认的分割数据集会将0设置为背景类，其余的1-150为我们要预测的类别，一般来说设置的背景类是要忽略的下面看MMCV的一段话即，我们在训练时应该将背景0类变为255，然后再optimizer中忽略掉255的分类像素值，这样就不会报错了，代码如下
解决错误 RuntimeError: cuda runtime error (710) : device-side assert triggered a
爱生活爱自己爱学习
03-13 1万+
在github上看别人的代码，用别人的数据集跑通了，满心欢喜的换自己的数据集，修改了一番后，发现遇到了莫名其妙的错误，如下 Traceback (most recent call last): File "train_discriminator.py", line 167, in <module> main() File "train_discriminator.py...
YOLO RuntimeError: CUDA error: CUBLAS_STATUS_NOT_INITIALIZED when calling `cublasCreate(handle)`
09-15
可能出现YOLO RuntimeError: CUDA error: CUBLAS_STATUS_NOT_INITIALIZED when calling `cublasCreate(handle)`错误的原因是底层的CUDA版本和应用的PyTorch版本不兼容。为了解决这个问题，您可以尝试以下几步： 1. 检查您的CUDA版本和PyTorch版本是否匹配。确保您正在使用的CUDA版本高于应用的PyTorch版本。您可以使用`torch.cuda.is_available()`函数来检查CUDA是否可用。 2. 如果您发现CUDA版本和PyTorch版本不兼容，您可以尝试升级或降级CUDA版本，或者升级或降级PyTorch版本，以使它们相互兼容。 3. 另外，您还可以尝试将`datasets.py`文件中的路径处理部分进行修改。将以下代码： ``` p = str(Path(path).absolute()) 或 p = str(Path(path).resolve()) ``` 修改为： ``` p = str(Path(path)) ``` 这将确保路径在不同操作系统上都能正确解析。 4. 最后，如果以上方法仍然无法解决问题，您可以参考相关的博客或论坛，以获取更多关于该错误的解决方案和建议。 希望以上方法能够帮助您解决YOLO RuntimeError: CUDA error: CUBLAS_STATUS_NOT_INITIALIZED when calling `cublasCreate(handle)`错误。如果问题仍然存在，请提供更多细节或尝试与相关的技术支持团队联系以获取进一步的帮助。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值