重平衡

Kafka重平衡导致无限循环消费问题Kafka消费者消费消息超过了5分钟，不停的触发重平衡，消费者的offset因为重平衡提交失败，重复拉取消费，重复消费。

Kafka消费者组重平衡（二）上一篇Kafka消费者组重平衡主要介绍了重平衡相关的概念，本篇主要梳理重平衡发生的流程。为了更好地观察，数据准备如下： kafka版本：kafka_2.13-3.2.1 控制台创建topic (2个分区1个副本): bin/kafka-topics.sh --create --bootstrap-server node1:9092 --replication-factor 1 --partitions 2 --topic test-rebalance

Kafka消费者组重平衡（一）重平衡，也就是Rebalance, 就是让一个 Consumer Group 下所有的 Consumer 实例就如何消费订阅主题的所有分区达成共识的过程。在 Rebalance 过程中，所有 Consumer 实例共同参与，在协调者组件的帮助下，完成订阅主题分区的分配。 Kafka消费者重平衡时一个很重要的概念，本文主要从什么是消费组，什么消费者组协调器，重平衡有哪些影响，又该如何降低重平衡这几方面来总结。