【问题标题】:HPC: Are launched nodes the clones of interface node?HPC:启动节点是接口节点的克隆吗?
【发布时间】:2018-11-12 17:29:20
【问题描述】:

提交请求多个节点的 SLURM 批处理作业时,启动的节点是否是接口计算机的克隆?他们是否复制接口计算机中的所有内容?在这里,接口计算机是我通过 ssh 连接、存储文件和提交作业的计算机。

特别是在 IO 上下文中,假设我从名为 data_N.dat 的文本文件中读取数据,其中 N 是进程等级。换句话说,每个进程(节点)都读取自己唯一的文件。当我提交 SLURM 作业时,是否所有这些文件都被复制到启动的节点?还是节点从接口计算机逐行读取输入文件?

【问题讨论】:

    标签: io hpc


    【解决方案1】:

    每个节点的行为就像您刚刚从界面通过 ssh 连接一样。

    如果没有共享文件系统(在 HPC 集群上很常见,但 SLURM 不提供)或外部共享文件夹,您需要通过 ssh/a 共享文件夹复制它们。

    您可以在 SLURM 中启动一个交互式任务并检查您是否可以访问您的文件。

    【讨论】:

      猜你喜欢
      • 2010-10-12
      • 1970-01-01
      • 1970-01-01
      • 2015-12-18
      • 1970-01-01
      • 1970-01-01
      • 2017-05-07
      • 1970-01-01
      • 2016-02-19
      相关资源
      最近更新 更多