查堆积用命令查:
bash
./kafka-consumer-groups.sh --bootstrap-server {kafka集群地址} --describe --group {消费组名称}
bash
bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --all-groups
#查看所有组别的积压情况
可以通过grep、awk或其他文本处理工具来过滤和查看特定的消费组或分区的信息
要判断消费组是否存在消息积压,需要查看 LAG 列:
如果 LAG 是0:表示该消费组已经消费了该分区中所有的消息,没有积压。
如果 LAG 大于0:表示消费组还有未处理的消息,即存在消息积压。
调整topic分区数:
bash
/data/app/kafka/bin/kafka-topics --alter --topic {Topic名} --partitions 8 --zookeeper {Zookeeper_IP}:{Zookeeper_port}
注意⚠️ Kafka 3.6.0版本会不再依赖zookeeper,该版本之后的topic分区调整需另外查阅资料!
重置消费组消费指定topic进度
bash
/data/app/kafka/bin/kafka-consumer-groups.sh --bootstrap-server {Kafka_IP}:{Kafka_port} --group {消费组名} --reset-offsets --to-latest --execute --topic {Topic名}