tensorflow训练突然找不到GPU failed call to cuInit: CUDA_ERROR_UNKNOWN

当使用TensorFlow进行训练时,遇到GPU初始化失败的问题,表现为`nvidia-smi`命令找不到且训练报错`CUDA_ERROR_UNKNOWN`。这通常由Ubuntu内核升级引起。解决方法包括重新加载NVIDIA模块或通过系统软件和升级设置重新安装驱动。
摘要由CSDN通过智能技术生成

参考

https://stackoverflow.com/questions/43992230/tensorflow-in-nvidia-docker-failed-call-to-cuinit-cuda-error-unknown/51120389#51120389

1现象

nvida-smi

nvida-smi:未找到命令

训练显示

failed call to cuInit: CUDA_ERROR_UNKNOWN

2原因

一般是ubuntu内核升级导致的.

3解决

3.1方法1

如果已经安装过显卡驱动,重新添加显卡试一下:

sudo modprobe nvidia

然后测试:

nvidia-smi

结果已正常。

 

3.2方法2

驱动重新应用一下。

打开系统的软件和升级设置项

"failed call to cuinit: cuda_error_no_device" 错误指出了在进行CUDA初始化时没有到可用的CUDA设备。这个错误信息通常意味着系统中没有安装或者没有正确配置CUDA驱动。 首先,需要确保系统中安装了适用于您的CUDA版本的正确驱动程序。在安装驱动程序之前,请查看您的GPU是否与该CUDA版本兼容,以避免出现不兼容的驱动程序问题。 如果您已经安装了正确的CUDA驱动程序,可以尝试以下解决方法: 1. 检查CUDA设备:运行`nvidia-smi`命令,确保显示了正确的GPU设备信息。如果没有显示任何GPU设备或显示的设备与您的实际GPU不匹配,可能需要重新安装或更新驱动程序。 2. 检查CUDA环境变量:确保正确配置了CUDA环境变量,例如`PATH`和`LD_LIBRARY_PATH`。这些环境变量应指向CUDA安装目录中的相关库和二进制文件。 3. 重新安装CUDA工具包:如果上述解决方法无效,可以尝试重新安装CUDA工具包。在此过程中,请确保选择与您的GPU和操作系统兼容的正确版本。 4. 检查其他相关软件和驱动程序:检查您的系统上是否有其他不兼容的软件或驱动程序,例如旧版本的CUDA驱动程序或其他GPU相关软件。确保这些软件与当前使用的CUDA版本兼容,或者尝试更新或卸载它们。 总结起来,解决“failed call to cuinit: cuda_error_no_device”错误需要确保正确安装和配置了适用于您的CUDA版本的驱动程序、检查CUDA设备信息、正确设置CUDA环境变量,并排除与其他不兼容软件或驱动程序的冲突。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值