Pentaho PDI 在 5 分钟后超时 JDBC 连接并出现 Java EOF 错误

问题描述

我会尽可能详细地总结。

背景故事:

我们有一个 PDI docker 镜像,其中包含最新的 Pentaho PDI 版本、java 8、最新的 JDBC 驱动程序和所有必需的依赖项。我们还有数十个 KTR 和 KJB Pentaho 脚本,它们运行良好,但较大的脚本存在问题。

问题:

当运行特定的 KTR 作业(基本上执行 3 个操作 - 从 DB A 获取数据、选择特定行、将行发送到 DB B)并且包含数万行时,到 DB B 的 DB 连接在 5 分钟后丢失。从 DB A 获取数据大约需要 15 分钟。

失败的 KTR 转换在 Windows PDI 版本上运行而没有任何断开连接时可以正常工作,之前在其他服务器上也可以正常工作,问题似乎只出现在 VM 和容器化环境中。 (在虚拟机上运行时,它在 5 分钟后不会断开连接,它只会卡住几个小时直到被杀死,但 Postgres 日志显示大约 1 小时后连接丢失)。失败时,PDI 返回 java EOF 错误

尝试过的解决方案:

我尝试过增加 TCP 超时、更改 postgres 配置、在不同发行版上运行、安装旧版本的驱动程序和 PDI。 最大的问题是 PDI 出于某种原因创建了所有定义的数据库连接并使它们保持空闲。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)