微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

使用 Shopify/sarama 重新启动程序时从 kafka 获取最新偏移量

如何解决使用 Shopify/sarama 重新启动程序时从 kafka 获取最新偏移量

对不起,我有一个关于 kafka 使用 Shopify/Sarama 的问题。

  1. 我必须实现 func ConsumeClaim 并在内部循环以获取消息。 ConsumeClaim 在 goroutine 中被调用,每个分区都有自己的 goroutine。如果我消费的主题有 5 个分区,那么它将生成 5 个 goroutine 。 -> 我可以只做 3 个,而不是 5 个 goroutine 而不改变分区吗? (使用缓冲区等...)
  2. 当我重新启动程序时,它会在我停止程序之前从第一个偏移量而不是从当前偏移量开始。那么,如何在停止之前从最新的偏移量中获取消息?

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。