微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

为保留源顺序的 PubSub 生成事件的 SpringBatch 作业

如何解决为保留源顺序的 PubSub 生成事件的 SpringBatch 作业

我正在考虑创建一个 SpringBatch 作业,该作业使用表中的行来创建事件并将事件推送到 PubSub 实现。这里的问题是事件的顺序应该与表中用作事件创建过程源的行的顺序相同。

现在在我看来,SpringBatch 不是为这种订单持久性而设计的,因为批处理是并行处理然后写入的。这个问题唯一丑陋但可能可行的解决方案是在阅读器中进行所有处理(因此阅读器可以对 PubSub 进行读取+处理+写入),这有助于保持分页批次内的顺序,但即使如此也不会根据{{​​3}}

,似乎可以保证批量订单

任何想法如何使用 SpringBatch 或至少使用 SpringBoot 实现 ordered rows->ordered events 转换?提前致谢!

解决方法

现在在我看来,SpringBatch 并不是为这种订单持久性而设计的,因为批处理是并行处理然后写入的。

这仅适用于多线程或分区步骤。默认(单线程)面向块的步骤实现按照项目读取器返回的相同顺序处理项目。因此,如果您让数据库阅读器按照您想要的顺序返回项目,这些项目将按相同顺序写入您的 Pub/Sub 代理。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。