首先查看GPU占用情况
nvidia-smi
发现都被占满后,怀疑是不是中断的程序没有完全杀死,于是需要查看进程信息,包括运行进程的用户和文件等等
fuser -v /dev/nvidia*
但是注意用自己的权限只能查看到自己的进程,需要加入sudo权限才能查看到所有进程
sudo fuser -v /dev/nvidia*
查看某个进程的具体信息
ps -f -p 123456(进程pid)
杀死某个进程
kill -9 123456(pid)
引用大部分https://blog.csdn.net/qq_38055396/article/details/124065706