问题描述
在我的组织中，我们有两个Hadoop集群。我们有一个jupyterhub实例在最初设置为群集2的边缘节点的服务器上运行。为了允许jupyter用户将Spark作业提交到群集1，已创建了备用SPARK_CONF_DIR / HADOOP_CONF_DIR文件夹，并且用户选择了将作业提交到哪个群集修改这些环境变量。我一直试图让dask-yarn表现出相同的行为，但是却无法解决。从我的阅读看来，我应该只能够修改HADOOP_CONF_DIR，并且已经完成了，但是无论我对桌面脚本设置的内容如何，它总是提交给集群2。有人能成功进行这样的设置吗？ >
解决方法
暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！
如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@）