1 问题描述
使用gpustat之后,虽然显示除了gpu5之外别的都没有进程,但是GPU显存却被占用了
2 解决方法
原因是存在僵尸进程,已经运行完,但是内存并没有释放
fuser -v /dev/nvidia*
这个指令查看僵尸进程
然后kill掉即可,批量kill就pkill -9 -u liushuai pt_main_thread 就行
2024-11-16 19:04:15
使用gpustat之后,虽然显示除了gpu5之外别的都没有进程,但是GPU显存却被占用了
原因是存在僵尸进程,已经运行完,但是内存并没有释放
fuser -v /dev/nvidia*
这个指令查看僵尸进程
然后kill掉即可,批量kill就pkill -9 -u liushuai pt_main_thread 就行