nvidia-smi出现Failed to initialize NVML: Driver/library version mismatch的超级详细可靠解决方法而且不用重启)

已于 2024-02-29 00:22:22 修改
阅读量2.7k 收藏 7
点赞数 1
分类专栏： Linux 文章标签： linux
于 2023-06-27 17:12:38 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41616600/article/details/131420684
版权

今天早上用nvidia-smi命令，发现Failed to initialize NVML: Driver/library version mismatch，然后打开nvidia的log发现是自动更新了，然后自动更新不完全，导致libnvidia和nvidia版本不一致了，如果也遇到一样问题的同学请看下去
先生成一共nvidia的bug日志，会生成一个gz文件，我们解压缩就好
在这里插入图片描述
在这里插入图片描述
解压缩之后看文件中含有NVRM的文字，最好就看最后4行
在这里插入图片描述
这里可以看到说版本不一致
在这里插入图片描述
所以我们这里清除所有的nvidia和libnvidia
在这里插入图片描述
然后再安装

apt install nvidia-drive-470

再看所有nvidia所有的进程
在这里插入图片描述
手动把每个进程删掉
在这里插入图片描述
删完之后直接重启nvidia会提示如下错误
在这里插入图片描述
所以一个个服务重启
在这里插入图片描述
如果出现

FATAL: Module nvidia_drm is in use.

运行这个

systemctl isolate multi-user.target

然后再把所有上图remmod的都运行掉，就可以了
最后就大功告成了，再次，我要骂人了，我跑的LBM都断掉了，要重新跑了，数值模拟又不是深度学习模型，木有checkpoint可以弄，痛心！！
在这里插入图片描述

lily_cai
关注
  • 1
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Ubuntu系统下nvidia-smi 出现错误 Failed to initialize NVML: Driver/library version mismatch
qq_34937536的博客
03-08 2425
nvidia-smi报错 NVML: Driver/library version mismatch问题背景解决方案一、checking dmesg二、locate三、updatedb补充、总结 问题背景 系统：Ubuntu 16.04 LTS NOTE：每个人的问题都可能有差别，网上搜索时可以稍微对上号后再进行操作。 还有一般没有进行大面积改动（如我根本就没动怎么就报错了），问题的解决复杂度也应该不会很高。 主要是要装pytorch，想先查看一下nvidia-smi，结果出现如下错误： Failed to
nvidia-smi：Failed to initialize NVML: Driver/library version mismatch
weixin_50939988的博客
04-28 477
#由设置不能打开发现问题 (base) user@user-Precision-7920-Tower:~/biosoft$ gnome-control-center (gnome-control-center:9787): Clutter-CRITICAL **: 21:20:13.172: Unable to initialize Clutter: 无法初始化 Clutter 后端：无可用的驱动。 段错误 (核心已转储) (base) user@user-Precision-7920-Tower:~/b
nvml_fix:nVidia 的 NVML 库中令人讨厌的错误的解决方法。 使nvidia-smi再次工作！
05-29
关于 基本原理 这是 nVidia 的 Linux 驱动程序中相当烦人的错误的解决方法。 很久以前，您只需输入nvidia-smi即可查看有关 GeForce GPU 的各种有用信息——但是，在最近的驱动程序中，输出主要由“N/A”主导。 这是因为 nVidia 不再支持nvidia-smi的 GeForce 系列 GPU。 然而，真正的错误存在于 nVidia 管理库 (NVML) 中，它错误地报告不支持 GPU。 该存储库提供了针对该错误的修复程序。 这个怎么运作 此解决方法是位于尝试使用 NVML（Ganglia 插件、pyNVML、nvidia-smi 等）和实际 NVML 库本身之间的程序之间的垫片。 每当从 NVML 请求设备句柄时，垫片会在将其返回到托管程序之前翻转内部“支持”标志。 因此，在后续调用库时使用句柄时，NVML 正确地看到该设备实际上受支持，并正确返回信息。
nvidia-smi报错：Failed to initialize NVML: Driver/library version mismatch
Bean的博客
04-11 568
nvidia-smi报错：Failed to initialize NVML: Driver/library version mismatch
已解决【nvidia-smi】Failed to initialize NVML: Driver/library version mismatch解决方法 亲测有效！！！
最新发布
m0_55927959的博客
05-27 4454
已解决【nvidia-smi】Failed to initialize NVML: Driver/library version mismatch解决方法 亲测有效！！！
解决nvidia-smi “Failed to initialize NVML: Driver/library version mismatch”
jingjm00的博客
01-26 4347
根据网上类似问题的线索，大概率是自动升级后library立即更新，而driver由于是kernal module不会自动运行新版本导致两者不匹配。今天发现有如下错误。什么也不需要做，reboot 后 driver version 就更新了。在下文可以看到reboot后driver已更新到。原来的设定如下，我把。这个问题还是挺常见的，在此主要记录一下我遇到的具体情况。不是工作时段，很可能是自动完成的。已经安装了，只是运行的还是旧版本。都改了，不知道是否管用。，和NVML保持一致了。这里不是很确定是否正确。
已解决【nvidia-smi】Failed to initialize NVML: Driver/library version mismatch解决方法
05-11 2万+
已解决（亲测有效）【nvidia-smi】Failed to initialize NVML: Driver/library version mismatch解决方法
Failed to initialize NVML: Driver/library version mismatch
weixin_43568307的博客
12-05 3万+
Failed to initialize NVML: Driver/library version mismatch
【nvidia-smi】Failed to initialize NVML: Driver/library version mismatch解决方法(不用重启)
qq_48081868的博客
01-06 3万+
项目场景： 在带有GPU的linux上执行 "nvidia-smi",提示Failed to initialize NVML: Driver/library version mismatch。 因为这个原因，导致我们无法使用GPU，从而无法进行深度学习等相关的任务。 另外，因为是实验室的服务器，虽然网上好多人都说，重启 `reboot`指令可以解决问题，但是因为服务器是实验室的，我们不能进行重启。 所以我找到了一种不重启，解决这个问题的方法。 问题描述： 系统： Ubuntu18.04 问题： 执行nv
Nvidia 显卡 Failed to initialize NVML Driver/library version mismatch 错误解决方案
热门推荐
zywvvd的博客
04-08 8万+
本文记录错误 Failed to initialize NVML: Driver/library version mismatch 错误解决方案。 问题复现 $ nvidia-smi --> Failed to initialize NVML: Driver/library version mismatch 问题分析 NVIDIA 内核驱动版本与系统驱动不一致 查看显卡驱动所使用的内核版本 cat /proc/driver/nvidia/version --> NVRM ve..
nvidia-smi的简介、安装使用的安装包
11-14
**nvidia-smi详解** `nvidia-smi`（NVIDIA System Management Interface）是NVIDIA公司推出的一个命令行工具，用于管理和监控NVIDIA GPU设备。它提供了对GPU硬件状态的实时视图，包括GPU温度、功率消耗、内存使用...
zabbix-nvidia-smi-multi-gpu:使用nvidia-smi的zabbix模板。 在Windows和Linux上与多个GPU配合使用
05-08
zabbix-nvidia-smi-multi-gpu 使用nvidia-smi的zabbix模板。 与Windows和Linux上的多个GPU配合使用。特征： 所有图形卡的低级发现项目原型： 风扇转速总计，可用和已用内存功率以十瓦为单位（数十瓦，因此它可以很好...
nvidia-smi.exe nvidia-smi.exe
02-15
nvidia-sim简称NVSMI，提供监控GPU使用情况和更改GPU状态的功能，一个跨平台工具，支持标准的NVIDIA驱动程序支持的Linux和WindowsServer 2008 R2 开始的64位系统
nvidia_smi_exporter:nvidia-smi普罗米修斯出口商
05-08
nvidia_smi_exporter 用于Prometheus的nvidia-smi指标导出器 建造 > go build -v nvidia_smi_exporter 跑步 > ./nvidia_smi_exporter [] 默认端口是9101 本地主机：9101 / metrics temperature_gpu{gpu="TITAN X ...
Nvidia显卡Failed to initialize NVML Driver/library version mismatch错误解决方案
weixin_54104864的博客
11-07 5048
最近GPT比较火，开始折腾了一下gpu,用来跑项目：今天运行程序突然发现用不了，经排查应该是由于NVIDIA内核驱动版本与系统驱动版本不一致导致的。下面简单总结了这个错误的解决方案。
【已解决】Failed to initialize NVML: Driver/library version mismatch NVML library version: 535.161
BetrayFree的博客
04-11 1万+
分配的新电脑，ubuntu18.04系统，nvidia的驱动都装好了，但是使用指令： nvidia-smi报错： Failed to initialize NVML: Driver/library version mismatch安装gpustat也显示找不到gpu，且cuda，深度学习gpu均不行 …解决此问题的一种方法是更新或回滚 NVIDIA 驱动程序，以使其与当前安装的 NVML 库版本匹配。上面4个方法是我都一一尝试过的，我用的系统是ubuntu的，具体方法也都是在知乎和csdn找的。
nvidia-smi Failed to initialize NVML: Driver/library version mismatch
08-31
当使用nvidia-smi命令时，出现"Failed to initialize NVML: Driver/library version mismatch"错误，这意味着您的显卡驱动与内核版本不匹配。该错误通常发生在系统自动更新了显卡驱动程序的情况下，而没有及时同步...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值