nvidia-smi命令卡住，长时间刷不出来

最新推荐文章于 2024-05-16 20:56:22 发布
最新推荐文章于 2024-05-16 20:56:22 发布
阅读量1.9w 收藏 5
点赞数 4
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012759006/article/details/103629003
版权
在Linux服务器上遇到nvidia-smi命令执行卡住的问题，通过运行'nvidia-bug-report.sh'生成并分析显卡问题报告，发现在16:11之后无记录，原因是电源电压不足。解决方案是升级为大功率电源。
摘要由CSDN通过智能技术生成

使用linux服务器时出现如题问题，说明显卡驱动出现错误

1、sudo nvidia-bug-report.sh     在当前路径下生成显卡问题报告

2、对问题报告解压并查看

3、翻阅到下面部分，发现从下午16：11之后就没有记录，说明在这里出现问题

  journalctl -b -0:
Dec 16 15:24:20 ubuntu kernel: nvidia-nvlink: Nvlink Core is being initialized, major device number 244
Dec 16 15:24:21 ubuntu kernel: NVRM: loading NVIDIA UNIX x86_64 Kernel Module  418.43  Tue Feb 19 01:12:11 CST 2019
Dec 16 15:24:21 ubuntu kernel: nvidia-modeset: Loading NVIDIA Kernel Mode Setting Driver for UNIX platforms  418.43  Tue Feb 19 01:05:14 CST 2019
Dec 16 15:24:21 ubuntu kernel: [drm] [nvidia-drm] [GPU ID 0x00000400] Loading driver
Dec 16 15:24:21 ubuntu kernel: [drm] [nvidia-drm] [GPU ID 0x00000500] Loading driver
Dec 16 15:24:21 ubuntu kernel: [drm] [nvidia-drm] [GPU ID 0x00000600] Loading driver
Dec 16 15:24:21 ubuntu kernel: [drm] [nvidia-drm] [GPU ID 0x00000700] Loading driver
Dec 16 15:24:21 ubuntu kernel: [drm] [nvidia-drm] [
最低0.47元/天 解锁文章
yjyn1
关注
  • 4
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
nvidia-smi命令无法正常使用的解决方案
贱贱的剑
07-12 1万+
深度学习训练模型之时需要GPU支持，但是当我们输入nvidia-smi之后会提示类似于以及的错误。以下分别进行说明。
【运维】执行nvidia-smi有点卡，解决办法
q742971636的博客
11-08 1562
考虑到这一点，以下是在系统引导时自动启用NVIDIA持久性模式的一种更通用的方法。请注意，在进行系统配置更改之前，请确保已备份数据，并且最好在具有管理员权限的情况下进行操作。有些情况下，你可能需要在系统引导时运行这个命令。不是所有Linux发行版中都默认启用的，且并非在所有情况下都适用。脚本来启用 NVIDIA GPU 的持久模式。你目前在执行的解决方案似乎旨在通过在系统启动时使用。根据你提供的信息，我看到了一些问题和误导。这将在系统引导时启用 NVIDIA 持久性模式。文件应该在每次系统引导时自动运行。
有关GPU主机的一些故障
Dancen的专栏
10-25 3607
该GPU主机，其内存为32G，已要求商家安装ubuntu 20.04操作系统，并安装好nvidia显卡驱动。由于主机内存偏小，在启动主机前，我首先给主机增加了一条内存，将内存扩展至64G，然后再开机。开机后，执行nvidia-smi命令出现了以上报错。难道商家忘了安装显卡驱动，那就自行安装吧。
执行nvidia-smi命令，反应特别慢的原因
最新发布
盛世芳华
05-16 697
公司有多台AI服务器，最近几台服务器在执行nvidia-smi命令时，非常慢，要等5-6秒才能执行成功，翻了系统日志也没找到任何异常，最后发现，原来是显卡切换到了节能模式，只需关闭节能模式，切换到持久模式即可。系统重启后，大概率又会变成节能模式，只需要在系统引导时自动启用NVIDIA持久性模式即可。
解决显卡驱动报错、nvidia-smi出不来、NVIDIA driver is installed and running.couldn‘t communicate with the NVIDIA
qq_55957975的博客
10-29 2万+
本期，我们来解决显卡驱动报错，nvidia-smi出不来的问题。 在我们应用linux系统时，可能一个偶然，更新了显卡驱动，导致我们在使用nvidia-smi时会出现报错，导致我们在代码训练时，查看不到它的一个工作状态。 下面我们将提出三个方法，来解决这个问题！ 方法一： 在terminal终端输入 sudo modprobe nvidia ，然后再运行nvidia-smi，即可解决。 方法二： 只需要三条命令就好。 te...
解决nvidia-smi报错问题
qq_30347421的博客
03-14 1234
解决nvidia-smi报错问题重装nvidia驱动卸载原有驱动CTRL+ALT+F1进入命令行模式临时关闭显示服务重装nvidia驱动启动显示服务查看是否安装完成 重装nvidia驱动 卸载原有驱动 $sudo apt-get remove nvidia-* $sudo apt-get autoremove CTRL+ALT+F1进入命令行模式 临时关闭显示服务 $sudo service l...
有效解决：nvidia-smi报错Failed to initialize NVML: Unknown Error 且 print(torch.cuda.is_available())一直卡住
weixin_46344368的博客
04-09 3171
看了n篇博客和文章，没有一篇是靠谱的（至少不适用于博主本人遇到的情况），在寻求解决方法这个过程中博主总结了可能是驱动版本问题以及曾经安装的NVIDIA CUDA的影响。删除后要去找自己GPU适配的最新驱动并进行更新。
nvidia-smi卡顿详解
csuzhaoqinghui的博客
02-25 8863
如果显卡数量在4张以上，在nvidia-smi信息后会非常的慢，非常的卡。尤其在只在乎计算量服务器的时候。 我试过把8张卡 tesla K80 显卡一个个拆下来 8张、7张 6/5/4/3/2/1试试nvidia-smi 结果速度都一样。 需要4到5分钟时间，甚至都不出直接死机。 解决方法 开始的时候以为是driver没有安装好，但是使用nvidia-smi之后可以显示GPU信息，只是疑惑Persistence-M为什么是off呢。。。然后就将其状态改为ON试试，就可以了。 nvidia-..
[环境配置]nvidia-smi输入后几十秒后才有反应卡主解决方法
FL1623863129的博客
06-12 2455
安装好nvidia的驱动,每次执行nvidia-smi命令时,要5秒以上，就跟卡死了一样，这个可如何是好啊，于是找到一个命令输入进去。之后在输入nvidia-smi也不卡了，重启系统也没有发现问题。大家可以试试这个办法。
nvidia-smi报错：NVIDIA-SMI has failed because it couldn‘t communicate with the NVIDIA driver 原因及避坑解决方案
weixin_45128667的博客
09-01 374
这是由于重启服务器，linux内核升级导致的，由于linux内核升级，之前的Nvidia驱动就不匹配连接了，但是此时Nvidia驱动还在，可以通过命令 nvcc -V 找到答案。如果失败了，别急，接着往下看>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>如果安装失败了，请跟者本文走>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>到了这里，如果你安装成功，那么恭喜你，此时输入nvidia-smi就会成功连接了！
nvidia-smi的简介、安装使用的安装包
11-14
对于开发人员、系统管理员以及数据科学家来说，`nvidia-smi`是一个必不可少的工具，用于优化GPU资源的使用和诊断GPU相关问题。 **1. 安装nvidia-smi** 在Linux系统中，通常通过包管理器来安装`nvidia-smi`。对于...
nvidia-smi.exe nvidia-smi.exe
02-15
nvidia-sim简称NVSMI，提供监控GPU使用情况和更改GPU状态的功能，一个跨平台工具，支持标准的NVIDIA驱动程序支持的Linux和WindowsServer 2008 R2 开始的64位系统
nvidia-htop:一种丰富nvidia-smi输出的工具
08-05
用于丰富nvidia-smi输出的工具。 安装 pip3 install nvidia-htop 是的，这个工具自 2021 年以来一直在 PyPi 上！ 享受超级简单的安装方式。 用法 nvidia-htop.py [-l [length]] print GPU utilization with ...
nvidia_smi_exporter:nvidia-smi普罗米修斯出口商
05-08
nvidia_smi_exporter 用于Prometheus的nvidia-smi指标导出器 建造 > go build -v nvidia_smi_exporter 跑步 > ./nvidia_smi_exporter [] 默认端口是9101 本地主机：9101 / metrics temperature_gpu{gpu="TITAN X ...
zabbix-nvidia-smi-multi-gpu:使用nvidia-smi的zabbix模板。 在Windows和Linux上与多个GPU配合使用
05-08
zabbix-nvidia-smi-multi-gpu 使用nvidia-smi的zabbix模板。 与Windows和Linux上的多个GPU配合使用。特征： 所有图形卡的低级发现项目原型： 风扇转速总计，可用和已用内存功率以十瓦为单位（数十瓦，因此它可以很好...
NVIDIA驱动出错：NVIDIA-SMI has failed because it couldn‘t communicate with the NVIDIA driver. Make sure t
热门推荐
sazass的博客
04-23 7万+
具体症状表现为： 1 . 显示驱动已安装 2 . 输入nvidia-smi,报如下错误： NVIDIA-SMI has failed because it couldn’t communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed and running. 3 . 在跑深度学习网络时，也显示找不到GPU 操作方式： 方案一：在BIOS界面，禁用secure boot，也就是设置为dis
重启后nvidia-smi命令不可执行，出现“Make sure that the latest NVIDIA driver is installed and running.”
西京刀客
12-20 942
NVIDIA驱动是在低版本的时候安装，由于系统更新，内核版本升级导致NVIDIA无法应用在高内核版本
【显卡掉了，NVIDIA-SMI has failed because it couldn‘t communicate with the NVIDIA driver.】
我不会离散数学的博客
04-05 466
有输出，如–>nvidia-530.41.03<–表明驱动程序的相关文件已经存在于系统中，但并不能确保驱动程序已经完全安装并正在正常运行。查看推荐版本（recommand）没输出，就是没内核没载入模块。查看已经安装的显卡驱动。
linux系统找不到nvidia-smi命令
09-08
对于找不到`nvidia-smi`命令，可能有几个原因导致： 1. NVIDIA驱动未正确安装：请确保已经正确安装了NVIDIA显卡驱动。你可以通过在终端中执行`nvidia-smi`命令来检查驱动是否已经安装。如果未安装，请按照NVIDIA官方文档的指导进行驱动安装。 2. 环境变量配置错误：`nvidia-smi`命令可能未包含在系统的环境变量中。你可以尝试使用完整路径执行该命令。例如，在终端中执行`/usr/bin/nvidia-smi`命令。 3. NVIDIA驱动版本不兼容：如果你的NVIDIA显卡驱动版本与当前的Linux内核版本不兼容，可能会导致`nvidia-smi`命令无法找到。你可以尝试升级或降级驱动版本以解决兼容性问题。 4. NVIDIA CUDA未正确安装：如果你需要使用CUDA相关功能，你需要确保已经正确安装了NVIDIA CUDA。请按照NVIDIA官方文档的指导进行CUDA安装。 如果你仍然无法找到`nvidia-smi`命令，请提供更多详细信息，例如操作系统版本、NVIDIA驱动版本等。这将有助于更准确地定位问题，并给出相应的解决方案。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值