【问题标题】:Set environment variables all over processes in Julia在 Julia 的所有进程中设置环境变量
【发布时间】:2019-05-16 12:58:02
【问题描述】:

我目前正在使用 Julia (1.0) 在 HPC 集群上运行一些并行代码。 HPC 由 PBS 管理。我正在尝试找到一种在所有进程中广播环境变量的方法,即一种自动广播特定环境变量列表以便在每个 Julia 工作人员中访问它们的方法。

#!/bin/bash
#PBS ...

export TOTO=toto
julia --machine-file=$PBS_NODEFILE my_script.jl

在此示例中,我将无法访问每个 julia worker 中的变量 TOTO(通过 ENV["TOTO"])。

我发现做我想做的唯一方法是在我的 .bashrc 中设置变量,但我希望这是特定于脚本的。另一种方法是放入我的 startup.jl 文件:

@everywhere ENV["TOTO"] = $(ENV["TOTO"])

但这不是特定于脚本的,因为我必须提前知道我要发送哪些变量。如果我对 ENV 键进行循环,那么我将广播所有变量,然后覆盖我不想要的变量。

我尝试使用DotEnv.jl,但它不起作用。

感谢您的宝贵时间。

【问题讨论】:

    标签: environment-variables julia hpc pbs


    【解决方案1】:

    显而易见的方法是首先在script.jl 中设置变量。您还可以将初始化放在单独的文件中,例如environment.jl,并将其加载到带有 -L 标志的所有进程上:

    julia --machine-file=$PBS_NODEFILE -L environment.jl my_script.jl
    

    在这种情况下,environment.jl 将包含

    ENV["TOTO"] = "toto"
    

    等等

    【讨论】:

      猜你喜欢
      • 2013-01-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-09-08
      • 2014-07-13
      • 1970-01-01
      相关资源
      最近更新 更多