environment-variables - 在 Julia 中设置整个进程的环境变量

标签 environment-variables julia hpc pbs

我目前正在与 Julia (1.0) 合作在 HPC 的集群上运行一些并行代码。 HPC 由 PBS 管理。我试图找到一种在所有进程中广播环境变量的方法,即一种自动广播特定环境变量列表的方法,以便在每个 Julia worker 中访问它们。

#!/bin/bash
#PBS ...

export TOTO=toto
julia --machine-file=$PBS_NODEFILE my_script.jl

在这个例子中,我将无法访问每个 julia worker 中的变量 TOTO(通过 ENV["TOTO"])。

我发现做我想做的唯一方法是在我的 .bashrc 中设置变量,但我希望这是特定于脚本的。另一种方法是放入我的 startup.jl 文件:
@everywhere ENV["TOTO"] = $(ENV["TOTO"])

但它不是特定于脚本的,因为我必须事先知道我要发送哪些变量。如果我对 ENV 键进行循环,那么我将广播所有变量,然后覆盖我不想要的变量。

我尝试使用 DotEnv.jl但它不起作用。

谢谢你的时间。

最佳答案

显而易见的方法是首先在 script.jl 中设置变量.您还可以将初始化放在单独的文件中,例如environment.jl ,并使用 -L 在所有进程上加载它旗帜:

julia --machine-file=$PBS_NODEFILE -L environment.jl my_script.jl

哪里environment.jl在这种情况下,将包含
ENV["TOTO"] = "toto"

等等。

关于environment-variables - 在 Julia 中设置整个进程的环境变量,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/56169168/

相关文章:

mpi - 现在 MPI 在 HPC 中被广泛使用了吗?

c++ - MPI中的MPI_Type_struct和MPI_Type_create_struct有什么区别?

laravel - 使用 "envFrom"和 "configMapRef"(kustomize/kubernetes/laravel) 时,环境变量在 pod/容器中不可用

C++ 使用 GetEnvironmentVariable() 的完整路径写入文件错误

julia - 具有重复元素的数组的内存和计算高效创建

julia - 将字符串参数转换为正则表达式

dataframe - 如何将 Julia DataFrame 列中的数值转换为缺失值?

binary-search-tree - BST 在 HPC 中的应用

swift - 在 Swift 中引用环境变量

python - 使用 PyInstaller 2.1 和 MEIPASS 错误捆绑数据文件 --onefile