kafka-偏移量图解

生产者偏移量:生产者发送消息时写入到哪个位置(主题的每个分区会存储一个 leo 即将写入消息的偏移量),每次写完消息 leo 会 + 1
消费者偏移量:消费者从哪个位置开始消费消息,小于等于 leo,每个组都可以单独按照自己的进度消费主题分区中的消息,消费者 offset 使用消费者组+主题名+分区号 作为键,offset作为值存储


相关推荐
jj_ccwgw1 小时前
Kafka 集群开机自启动配置指南
后端·kafka
JackSparrow4144 小时前
Kafka(七)集成Apache Avro+Apicurio Schema Registry以保障生产者与消费者的消息兼容性
java·中间件·rpc·kafka·apache·avro·schema-registry
阿里云云原生4 小时前
企业级实时数据平台建设:利用存算分离 Kafka 实现低成本、高可靠入湖
分布式·阿里云·云原生·kafka
JAVA面经实录9176 小时前
Kafka面试题标准答案(面试背诵版)
分布式·面试·kafka
阿里云云原生21 小时前
深入解析存算分离 Kafka:如何实现从 Topic 到 Iceberg Table 的原生入湖?
kafka
骇客野人2 天前
SpringBoot 接入 Kafka 完整实操步骤
spring boot·kafka·linq
Sayai2 天前
Kafka 集群开启 SASL 认证实战(二):外置 ZooKeeper 之 kafka 与 zk 间认证
分布式·zookeeper·kafka
Sayai2 天前
Kafka 集群开启 SASL 认证实战(一):内置 ZooKeeper 场景,JAAS 配置全流程
分布式·zookeeper·kafka
Sayai2 天前
Kafka 集群开启 SASL 认证实战(三):外置 ZooKeeper 完整版,quorum 认证 + ACL 访问控制
zookeeper·kafka·linq
海兰2 天前
【Kafka进阶6】顺序消费深度解析
分布式·kafka·linq