一、消费者总体工作流程图解
- 角色划分：生产者、zookeeper、kafka集群、消费者、消费者组。如下图所示:
- 生产者发送消息给leader，followerr主动从leader同步数据，一个消费者可以消费某一个分区数据或者一个消费者可以消费多个分区数据。如下图所示:
- 每个分区的数据只能由消费者组中一个消费者消费。如下图所示:
- 每个消费者的offset由消费者提交到系统主题保存。如下图所示:
Kafka3.0.0版本——消费者（消费者总体工作流程图解）
小志的博客2023-09-14 8:13
相关推荐
ly76891 天前
Kafka 消费者重试与死信：Spring for Apache Kafka 的边界设计我不会起名字3222 天前
Kafka 顺序消息为什么乱了：分区数变化与重试的 3 类原因每天一道题3 天前
Kafka 是如何工作的？从 Broker、Partition、Offset 到 Consumer GroupClouGence3 天前
还在用命令行管理 Kafka？开源 CloudDM 让操作更简单Sayai3 天前
Kafka 磁盘空间治理实战：retention 保留策略、log.dirs 在线扩容、分区跨盘迁移与不停机整体换盘孤狼GPT3 天前
ChatGPT、Codex排查实录：Kafka消费者日志明明显示处理成功，为什么同一条消息还是被重复消费？starzy19903 天前
KafkaProducer 源码深度剖析：batch 发送的条件SL-staff4 天前
JVS私有化部署运维避坑指南：Kafka容灾、ES冷热分离、RabbitMQ可观测性三实战检查项starzy19904 天前
KafkaProducer 源码深度剖析：支撑高吞吐的数据结构设计