微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

我可以将 Kafka Streams 滑动窗口选项用于更长的持续时间,例如 6 个月、1 年等吗?

如何解决我可以将 Kafka Streams 滑动窗口选项用于更长的持续时间,例如 6 个月、1 年等吗?

我的用例是,我需要在任何时间点显示过去 3 个月、6 个月和 1 年的客户使用情况统计信息。我计划在上述持续时间内使用 KStream 滑动窗口。我看到的大多数示例都使用以分钟或秒为单位的持续时间。我想知道是否可以为滑动窗口使用更大的持续时间?任何性能影响?应该使用任何特定配置来获得最佳性能

谢谢, 金努

解决方法

这实际上取决于数据的密度以及您正在执行的聚合类型。由于结束时间太远,最终可能会导致大量窗口更新而不关闭。此外,如果它太重,我不确定州商店是否可以处理。但是在正确的加载和保留时间下,我看不出明显的原因它不起作用。

编辑:如果你最终尝试了它,我会很想知道它是如何工作的。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。