kafka组再平衡需要很长时间

Question

我正在经历组重新平衡需要很长时间才能阻止任何消费者消费消息。 我的问题：

1. 为什么组再平衡需要这么长时间？
2. 如何解决这个问题？我需要重新启动 kafka 集群吗？或任何解决方法，因为我们在生产中使用 kafka 集群

以下是截图：

bin/kafka-consumer-groups.sh --bootstrap-server localhost:9095 --new-consumer --describe --group command-consumer-ldnpsr000001135   --command-config config/consumer.config
Consumer group `command-consumer-ldnpsr000001135` is rebalancing.

感谢任何建议？

Answer 1

这有两个可能的原因：

1. 当消费者加入组时，将启动重新平衡过程。重试次数有一个配置：rebalance.max.retries，默认设置为4。

2. 如果消费者未能向 Zookeeper 发送心跳。 ZooKeeper 会话超时。 ZooKeeper 在这段时间内被认为是死的，并且会发生重新平衡。