问题描述
在我们的 flink 应用中,我们需要加载一些外部属性文件:
Thread.currentThread().getContextClassLoader().getResourceAsstream("xx.properties");
我们还必须通过 Flink 的 REST API 提交作业。经过一些测试,我们发现Flink作业有时运行流畅,有时找不到属性文件,会抛出NullPointerException。
通过更多的测试,我们发现 Flink 集群启动的工作目录似乎会影响作业可访问的资源,即使我们使用绝对路径启动 Flink。
比如propertiy文件在/usr/flink-1.11.2/xx.properties
,Flink集群在同一个工作目录下启动:
[/]$ cd /usr/flink-1.11.2/
[flink-1.11.2]$ /usr/flink-1.11.2/bin/start-cluster.sh
然后我们提交作业,一切正常。
但是如果集群是从不同的工作目录启动的:
[/]$ cd /usr/someotherpath/
[someotherpath]$ /usr/flink-1.11.2/bin/start-cluster.sh
这种行为的原因是什么?它是由 Flink 定义的(但我没有找到任何关于此的文档),还是其他某种机制的结果,例如 Java classLoader?
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)