【Kafka每日一问】Kafka分区分配策略有哪些?

Kafka分区分配策略有哪些

  1. Range分配策略 (Range):

    • 这是默认的分配策略。在这种策略下,每个消费者负责订阅主题的连续范围内的分区。例如,如果有两个消费者和一个主题有12个分区,那么第一个消费者将负责分区0到5,第二个消费者将负责分区6到11。
  2. RoundRobin分配策略 (RoundRobin):

    • 在这种策略下,分区会以循环轮询的方式均匀地分配给消费者组中的每个消费者。这种方式在分区数多于消费者数时能较好地平衡负载。
  3. Sticky分配策略 (StickyAssignor):粘性

    • 这种策略旨在最小化消费者重新平衡时分区所有权的变化。它会尽可能保持现有的消费者-分区分配关系,只有在必要时才进行变更。这有助于减少因为分区重新平衡而导致的消费者群体中的延迟。
相关推荐
RobinXYuan2 小时前
【Kafka 源码手记】04 客户端如何找到 Broker
kafka·源码阅读
爱吃火鸡面呀4 小时前
深入理解 Spark RDD:五大特性与实战解析
大数据·分布式·spark
Linux实战笔记5 小时前
记一次消息队列选型对比线上排查:Kafka/RabbitMQ/Pulsar 技术选型
kafka·rabbitmq·高并发·pulsar·消息队列选型
Norris Huang6 小时前
Kafka Connect 与 Flink CDC 写入 Iceberg:Upsert 的代价,以及 S3 Tables 的真正价值
分布式·flink·kafka
张彦峰ZYF6 小时前
一条消息的丢与重:Kafka 与 RabbitMQ 可靠投递的确认、位点、死信与幂等全链路
后端·kafka·消息队列·rabbitmq·isr·解耦与削峰·丢失与重复
我就是不信6 小时前
集群高并发环境下如何保证分布式唯一全局ID生成?
分布式
黄俊懿1 天前
【架构师从入门到进阶】第六章:服务集群优化——第八节:线程数公式
java·服务器·数据库·分布式·性能优化·架构·系统架构
大菠萝爱上小西瓜1 天前
基于 Spark + Iceberg 湖仓一体的 Netflix 流媒体用户行为全链路数仓与 ALS 智能推荐决策系统(含穿透下钻大屏)
大数据·分布式·spark
吴建旭 智宅焕1 天前
智能家居售后服务体系的架构设计:分布式售后风险的集中式兜底方案
分布式·智能家居
lisanmengmeng2 天前
Ganglia分布式集群监控系统安装手册
分布式