【发布时间】：2021-10-25 21:20:18
【问题描述】：
我正在使用 slurm 访问 GPU 资源。是否可以显示正在运行的 slurm 作业的 GPU 使用情况？就像在普通的交互式 shell 中使用 nvidia-smi 一样。
【问题讨论】：
【发布时间】：2021-10-25 21:20:18
【问题描述】：
您可以使用 ssh 登录您的作业节点。然后使用nvidia-smi。这个对我有用。 例如，我使用 squeue 检查我的作业 xxxxxx 当前在节点 x-x-x 上运行。然后我使用 ssh x-x-x 访问该节点。之后，您可以使用 nvidia-smi 查看 GPU 的使用情况。
【讨论】：
-
我收到此错误消息：无法初始化 NVML：未知错误
-
这意味着你的 cudatoolkit 没有安装。推荐通过anaconda安装
我建议尝试在 jupyter 中手动启动您的应用程序并在 jupyter 中访问终端 shell。
【讨论】：