实测梳理一下kafka分区分组的作用

bash 复制代码
清空topic

kafka-topics.sh --bootstrap-server localhost:9092 --delete --topic second



创建分区

kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 3 --topic second



发

kafka-console-producer.sh --bootstrap-server localhost:9092 --topic second

先存着几个测试时用的命令,测试前提

消费者1,2同组,消费者3 不同组

测试用例=>结论

  1. topic不分区 =》 消费者1,2只有一个有全部消费(好像是后面连接的那个), 消费者3全部消费
  2. topic分2个区 =》 消费者1,2随机分摊消费(但是不重复),消费者3全部消费
  3. topic分3个区 =》 消费者1,2随机分摊消费(但是不重复,也不会少消费消息),消费者3全部消费
相关推荐
giaz14n9X15 小时前
Redis 分布式锁进阶第六十三篇
分布式
ha_lydms17 小时前
AnalyticDB分区、分布键性能优化
android·大数据·分布式·性能优化·分布式计算·分区·analyticdb
pqk6V6Vep17 小时前
Redis 分布式锁进阶第一篇讲解
数据库·redis·分布式
梦想的颜色17 小时前
Kafka内核解密:架构拓扑、数据流转与生产消费模型的深度剖析
kafka·高并发·多线程·异步·消息组件·生产者与消费者模式
giaz14n9X17 小时前
Redis 分布式锁进阶第六十一篇
数据库·redis·分布式
洛水水19 小时前
消息队列与Kafka详解
分布式·kafka
鸿乃江边鸟20 小时前
Spark中怎么做Spark canonicalize归一化
大数据·分布式·spark
SLD_Allen20 小时前
Kafka分区与消费者的关系kafka分区和消费者线程的关系
分布式·kafka
he___H21 小时前
数据密集型应用系统设计--其一
分布式
珠***格1 天前
Ⅱ型边缘网关|易部署、易扩容、易改造
大数据·人工智能·分布式·能源·边缘计算