Pyspark 环境变量

问题描述

如何为集群上的所有执行程序设置环境变量,然后在 pyspark 脚本中获取此变量:

我找到了设置方法

"spark.yarn.appMasterEnv.var=value"

但是如何在构建 spark 会话后在 pyspark 脚本中获取此变量的值:

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)