如何确定我的（NVIDIA）GPU上正在运行什么？

Question

我正在使用我的GPU（Tesla K80）使用张量流训练神经网络，但出了点问题。 当我键入nvidia-smi我看到正在使用11239MiB / 11439MiB的内存，但是没有列出GPU的进程。 通常，发生这种情况时，我可以输入ps aux | grep python ps aux | grep python并找到耗尽GPU的进程，但是这次没有任何结果。

我如何确定我的GPU上正在运行什么，以及如何杀死它？

Answer 1

查看使用GPU的用户正在运行的所有进程。 杀死所有可能已使用GPU的进程。

ps -ef | grep <username>

您也可以尝试

sudo nvidia-smi --gpu-reset

如果没有任何效果，请考虑重新启动。