Kafka 再均衡(rebalance)触发的条件

Kafka 再均衡(rebalance)触发的条件,第1张

Kafka 再均衡(rebalance)触发的条件

        新版的消费客户端对此进行了重新设计,将全部消费组分成多个子集,每个消费组的子集在服务端对应一个GroupCoordinator对其进行管理,GroupCoordinator是Kafka服务端中用于管理消费组的组件。而消费者客户端中的ConsumerCoordinator组件负责与GroupCoordinator进行交互。
        ConsumerCoordinator与GroupCoordinator之间最重要的职责就是负责执行消费者再均衡的 *** 作,包括前面提及的分区分配的工作也是在再均衡期间完成的。就目前而言,一共有如下几种情形会触发再均衡的 *** 作:

  1. · 有新的消费者加入消费组。
  2. · 有消费者宕机下线。消费者并不一定需要真正下线,例如遇到长时间的 GC、网络延迟导致消费者长时间未向GroupCoordinator发送心跳等情况时,GroupCoordinator会认为消费者已经下线。
  3. · 有消费者主动退出消费组(发送 LeaveGroupRequest 请求)。比如客户端调用了unsubscrible()方法取消对某些主题的订阅。
  4. · 消费组所对应的GroupCoorinator节点发生了变更。
  5. · 消费组内所订阅的任一主题或者主题的分区数量发生变化。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/4670574.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-11-06
下一篇 2022-11-06

发表评论

登录后才能评论

评论列表(0条)

保存