Kafka操作指令笔记

是二狗诶2023-12-25 15:11

查堆积用命令查：

bash 复制代码

./kafka-consumer-groups.sh --bootstrap-server {kafka集群地址} --describe --group {消费组名称}

bash 复制代码

bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --all-groups
#查看所有组别的积压情况

可以通过grep、awk或其他文本处理工具来过滤和查看特定的消费组或分区的信息

要判断消费组是否存在消息积压，需要查看 LAG 列：

复制代码

如果 LAG 是0：表示该消费组已经消费了该分区中所有的消息，没有积压。
如果 LAG 大于0：表示消费组还有未处理的消息，即存在消息积压。

调整topic分区数：

bash 复制代码

/data/app/kafka/bin/kafka-topics --alter --topic {Topic名} --partitions 8 --zookeeper {Zookeeper_IP}:{Zookeeper_port}

注意⚠️ Kafka 3.6.0版本会不再依赖zookeeper，该版本之后的topic分区调整需另外查阅资料！

重置消费组消费指定topic进度

bash 复制代码

/data/app/kafka/bin/kafka-consumer-groups.sh --bootstrap-server {Kafka_IP}:{Kafka_port} --group {消费组名} --reset-offsets --to-latest --execute --topic {Topic名}