微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

Pentaho PDI 在 5 分钟后超时 JDBC 连接并出现 Java EOF 错误

如何解决Pentaho PDI 在 5 分钟后超时 JDBC 连接并出现 Java EOF 错误

我会尽可能详细地总结。

背景故事:

我们有一个 PDI docker 镜像,其中包含最新的 Pentaho PDI 版本、java 8、最新的 JDBC 驱动程序和所有必需的依赖项。我们还有数十个 KTR 和 KJB Pentaho 脚本,它们运行良好,但较大的脚本存在问题。

问题:

当运行特定的 KTR 作业(基本上执行 3 个操作 - 从 DB A 获取数据、选择特定行、将行发送到 DB B)并且包含数万行时,到 DB B 的 DB 连接在 5 分钟后丢失。从 DB A 获取数据大约需要 15 分钟。

失败的 KTR 转换在 Windows PDI 版本上运行而没有任何断开连接时可以正常工作,之前在其他服务器上也可以正常工作,问题似乎只出现在 VM 和容器化环境中。 (在虚拟机上运行时,它在 5 分钟后不会断开连接,它只会卡住几个小时直到被杀死,但 Postgres 日志显示大约 1 小时后连接丢失)。失败时,PDI 返回 java EOF 错误

尝试过的解决方案:

我尝试过增加 TCP 超时、更改 postgres 配置、在不同发行版上运行、安装旧版本的驱动程序和 PDI。 最大的问题是 PDI 出于某种原因创建了所有定义的数据库连接并使它们保持空闲。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。