如何知道 slurm 上正在运行的作业的实时内存使用情况？

Question

我对 cpu 如何与记忆进行通信知之甚少，所以我不确定这是否是一个“正确”的问题。

在我提交给 slurm 集群的作业脚本中，该脚本需要从存储在工作字典中的数据库中读取数据。我想监控运行这个脚本所使用的内存。

如何编写 bash 脚本来执行此操作？我试过@CoffeeNerd 的脚本。但是，在作业运行时，文件中只有一行输出

AveCPU|AveRSS|MaxRSS

如何修改此脚本以输出实时内存使用情况？

我知道sstat 命令，但我不确定sstat -j $JOBID.batch --format=MaxVMSize 之类的命令是否可以解决我的问题。

Answer 1

Slurm 有一个插件，可以将作业的“配置文件”（PCU 使用情况、内存使用情况等）记录到HDF5 文件中。它包含每个测量项目的时间序列。

使用

#SBATCH --profile=<all|none|[energy[,|task[,|filesystem[,|network]]]]>

激活它。

请参阅文档here。