ubuntu服务器解除显卡异常占用

在维护多显卡服务器的过程中，发现了一个奇怪的现象，就是某一块显卡的显存全被占满，但是使用率为0，而且使用nvidia-smi指令也看不到任何占用程序。经过询问发现，有个用户的程序有bug，每次用显卡加速后，都会异常退出，并且会留下僵尸进程占用该显卡。为了解决该问题，查资料后找到办法（需要管理员权限）：

sudo fuser -v /dev/nvidia*

查看每个显卡的占用进程，这些进程是top和nvidia-smi指令不显示的。

如图所示，服务器被异常占用的显卡是1号卡，僵尸进程是由于Python程序异常退出导致的，那我就将1号卡对应的python进程kill掉就行了：

sudo kill -9  32188
sudo kill -9  32209

然后再输入watch nvidia-smi查看显卡占用情况，果然就正常了。

ubuntu服务器解除显卡异常占用相关推荐

vb.net服务器启动后cpu占用了70_记一次服务器被异常程序占用的解决过程（怀疑黑客攻击）...
最近在跑实验,但是突然发现程序运行变慢,然后top命令查看程序运行情况,发现有异常进程,名字叫 bash,占用 2400% CPU计算资源. 刚开始怀疑是挖矿程序,因实验室网络IP为教育网公网,怀疑被 ...
【ubuntu】查看服务器上的进程占用GPU情况
[ubuntu]查看服务器上的进程占用GPU情况参考<shell脚本显示GPU进程所属docker 容器> 该博客是读取nvidia-smi信息后处理为奇数行为进程ID,偶数行为显存占用 ...
【记录+解决】ubuntu服务器显卡驱动安装；Ubuntu20.04重启后找不到Nvidia显卡驱动
记录ubuntu服务器显卡驱动安装一次ubuntu服务器显卡驱动安装历程,简单记录. 1.下载Nvidia-Linux驱动到本地 Nvidia-Linux-XXX.run 2.停用桌面,安装驱动 / ...
日立电梯服务器显示地址操作异常,日立电梯服务器地址操作异常
日立电梯服务器地址操作异常内容精选换一换介绍有读卡器的场景下将读卡器与Ubuntu服务器的USB连接,通过制卡脚本制作SD卡的操作.SD卡:准备一张SD卡,建议容量不低于16G.制作过程将会对卡 ...
linux发行版本Ubuntu安装，显卡驱动安装以及软件安装卸载
linux发行版本Ubuntu安装,显卡驱动安装以及软件安装卸载 1 暗影精灵6安装Ubuntu 1.1 更新系统 1.2卸载原有驱动 1.3安装nvidia显卡驱动 1.4 查看nvidia显卡信息 ...
ubuntu/centos 查看显卡信息
ubuntu/centos查看显卡信息 lspci |grep -i vga [适用于单块显卡信息查询] 输出:02:00.0 VGA compatible controller: NVIDIA ...
ubuntu服务器环境测试wss
简言 1. ubuntu服务器环境下,使用nginx搭建wss协议的方法,请参考笔者的这篇博客 go语言linux环境配置nginx,搭建wss_papaya的博客-CSDN博客_go nginx 2 ...
Linux服务器的显卡驱动丢失又装上的过程
记一次Linux服务器的显卡驱动消失又装上的过程因为reboot服务器了以后不明原因更新了centOS内核,导致显卡驱动没了,重新装驱动过程故事背景前一天试图更新linux默认语言,更改￥LAN ...
Ubuntu安装NVIDIA 显卡驱动
文章目录前言一.基本概念二.操作步骤 1.显卡硬件型号 2.安装驱动总结前言 NVIDIA(Nvidia Corporation,/ɛnˈvɪdiə/:港称乎为NVIDIA,台湾与香港译为辉 ...

ubuntu服务器解除显卡异常占用

ubuntu服务器解除显卡异常占用相关推荐

最新文章

热门文章