解决ubuntu程序停止后GPU仍被占用的情况

最新推荐文章于 2023-06-19 20:40:32 发布
最新推荐文章于 2023-06-19 20:40:32 发布
阅读量1.5k 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43229119/article/details/97618222
版权

解决ubuntu程序停止后GPU仍被占用的情况

问题：强制终止程序后，程序占用的GPU没有被释放

首先查看GPU使用情况：nividia-smi
确认要杀死的进程PID
杀死进程：kill -9 PID号（注意必须加-9，否则可能杀不掉）

LWJjing
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
记录 | ubuntu程序终止，显卡仍然被占用问题
极智视界
01-28 444
记录 | ubuntu程序终止，显卡仍然被占用问题
如何在docker容器中使用GPU以及使用pytorch
六十英里的专栏
07-07 1万+
最近刚接触docker，如有不当，请指出。 1. 首先要解决在docker中可以使用GPU的问题。 官方给出了解决办法：https://github.com/NVIDIA/nvidia-docker 具体操作如下: step 1:确认本机可以检测到NVIDIA卡，通过下列命令看自己GPU卡的型号。 lspci -vv | grep -i nvidia step 2:新建nvidia-container-runtime-script.sh文件 touch nvidia-container-ru
Ubuntu 实时监控GPU 显存，以及杀死进程
zbbmm的博客
11-04 2155
1. 我们设置为每 1s 显示一次显存的情况 watch -n 1 nvidia-smi 效果 2. 杀死进程 我们可以通过 进程的名字和进程的ID（PID）来结束进程。 结束命令： kill：通过进程ID来结束进程 killall：通过进程名字结束进程 最长使用的结束进程的信号是： Signal Name Single Value Effec SI...
Ubuntu系统kill后，显示看不到进程，但GPU显存仍被占用问题
weixin_42535423的博客
08-13 2677
Ubuntu系统有时候会出现GPU显存显示占满，但是使用top命令和nvidia-smi命令都查找不到进程。 fuser -v /dev/nvidia* 通过上条命令查找进程，然后使用 sudo kill -9 PID 将进程kill掉。
ubuntu杀掉GPU进程
怡宝2号
07-15 4573
ubuntu杀掉GPU进程用nvidia-smi的时候有时候有些进程没有显示出来 1. nvidia-smi 2. fuser -v /dev/nvidia* 和nvidia-smi对比，删掉多出来的进程
解决gpu没有运行进程，但是显存一直占用的方式
大鱼的博客
10-19 3万+
通常情况下，停止进程显存会释放 但是如果在不正常情况关闭进程，可能不会释放，这个时候就会出现这样的情况： Mon Oct 19 16:00:00 2020 +-----------------------------------------------------------------------------+ | NVIDIA-SMI 410.104 Driver Version: 410.104 CUDA Version: 10.0 | |-------
ubuntu使用ctrl+z中断并kill进程导致显卡无法释放以及nvidia-smi命令阻塞
CoolCoolCarrot的博客
07-13 2122
在用ubuntu服务器跑pytorch代码时无意中产生了这种错误，导致一切对显卡相关的操作都被阻塞。 问题具体描述：我在ubuntu服务器上创建了screen窗口，并在screen窗口内运行深度学习程序。程序跑到一半时错误地将ctrl+z当做了强制结束命令（实则是中断并休眠，结束是ctrl+c）将显卡上的进程切入了挂起状态，随后又将整个screen窗口进程kill掉了。导致的结果是显卡上进程成为了孤儿进程，并由PID为1的init进程接管。此时显卡资源被占用，一切对显卡的IO都会被阻塞（包括nvid.
（原创、不是重复文章）GPU Memory Usage占满而GPU-Util却为0的情况
weixin_57234928的博客
03-17 3735
一句话：在你的一个batch的数据都没加载进GPU内存前，你的GPU可能已经被占用了好几个G了，这几个G的数据就是你的model本身所需要的内存。 在你代码启动的那一刻，pytorch开始加载model，你的模型的复杂程度导致所需要的参数数量不一致，而这些参数所占用的内存不是用的系统内存，而是用你的GPU内存（即显存）。 先不讲其它文章提到的batch_size 、num_workers等等参数的调整。如果你的model够复杂，可能根本等不到加载到batch的那一刻内存就已经所剩无几了。所以为什么GP.
Ubuntu安装nvidia驱动步骤
06-14
- **作用**：该命令将系统状态切换到多用户命令行模式，停止所有图形界面服务，从而确保GPU驱动可以在没有其他进程干扰的情况下被安全地卸载或安装。 - **原理**：通过隔离模式，可以确保没有任何程序正在使用GPU...
【WSL2笔记2】 搭建深度学习开发环境踩坑笔记 Ubuntu+CUDA+cuDNN+PyTorch+Tensorflow+ONNX
老富的博客
04-06 2464
错误的结果就是配置的所有虚拟环境都以base的python版本运行，无法配置每个虚拟环境使用不同python版本，失去了虚拟环境意义。至此，适用PyTorch、Tensorflow、cuDNN框架的深度学习开发环境搭建完成。WSL 上的 CUDA 用户指南。安装protobuf 3.2版本。Anaconda官网版本档案。下载Anaconda安装包。创建Python虚拟环境。设置Anaconda路径。需要注册账号登录下载。通过SSH传送WSL。
Ubuntu下GPU显存无法释放和多卡训练时候的一些总结
ewqapple的博客
05-21 2078
如果我们正在训练模型的时候，强制ctrl+C 结束进程的话，有时候，GPU的显存不会释放， 一般情况下，我们会用nvidia-smi 的命令进行查看哪个进程占用了GPU显存。 但是有时候我们发现不了具体的进程，应该就是驻留在GPU里了。 如果用这条指令进行查看的话，sudo fuser /dev/nvidia* 下面会出现一些选项，如果用kill 指令杀出的话，可能图形界面也会杀没了。 ...
Ubuntu（Linux）GPU显存被占用但是找不到进程解决方法
yzqlyzql的博客
11-22 4516
Ubuntu（Linux）GPU显存被占用但是找不到进程解决方法
Ubuntu18.04安装NVIDIA显卡驱动后设置桌面显示不占用GPU内存的方法
最新发布
Explorer_XZH的博客
06-19 813
Ubuntu18.04安装NVIDIA显卡驱动后设置桌面显示占用GPU内存的方法
ubuntu下实时查看GPU使用情况的两种方式（nvidia-smi、gpustat）及结束占用GPU进程的命令
热门推荐
zeeq的博客
07-21 10万+
要查看gpu占用，这里介绍两个方法，一个是官方的nvidia-smi，装完显卡驱动就能使用了；另一个是gpustat，更方便于查看gpu使用情况。
解决程序已关闭GPU还在占用的问题
weixin_42051797的博客
06-13 3115
终端使用命令 nvidia-smi 查看正在使用GPU运行的程序，然后使用命令（将PID进行具体替换）即可 kill -9 PID
【Ubuntu-Tensorflow】程序结束掉GPU显存没有释放的问题
luckynote
08-11 2万+
笔者在ubuntu上跑Tensorflow的程序的时候，中途使用了Win+C键结束了程序的进行，但是GPU的显存却显示没有释放，一直处于被占用状态。 使用命令 watch -n 1 nvidia-smi 显示如下 两个GPU程序都在执行中，实际上GPU:0已经被笔者停止了，但是GPU没有释放，进程还在继续，所以只有采用暴力手段了，将进程手动关闭掉，进程编号如图中红线部分，由于笔者在两个G
ubuntu解决GPU显存占用问题
IT荻的博客
03-27 7982
遇到GPU占用显存过大，或者之前跑完没有清空，会导致一些错误 用nvidia-smi查看当前GPU占用情况 然后杀死进程 kill -9 PID 这里的PID就是你的进程号，哪个占的最多就是你要杀死的，记住基本的显示器的占用不要杀死了 ...
ubuntu系统，cuda突然不能使用
qq_41330902的博客
04-25 2522
之前程序可以运行，此次打开报错： RuntimeError: No CUDA GPUs are available 检查驱动和cuda是否可用 nvidia-smi：输出版本号，为可用 nvcc -V：输出版本号，为可用 上述显示驱动不可用，先不着急重装，下面链接可以尝试更新驱动 DKMS可以帮我们维护内核外的这些驱动程序，在内核版本变动之后可以自动重新生成新的模块。 sudo apt-get install dkms sudo dkms install -m nvidia -v...
Ubuntu安装Caffe-GPU与Anaconda3指南
这篇教程主要涉及在Ubuntu 18.04系统上安装Caffe（一个深度学习框架）的GPU版本，以及配合使用的Anaconda3环境，特别是针对Python3.6的配置。以下是详细步骤： 1. 安装推荐驱动： 在Ubuntu系统中，使用`sudo ubuntu...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值