Kafka 的 ISR 是什么

Kafka 的 ISR 是什么?(超清晰版)

ISR = In-Sync Replicas

中文叫:同步副本集合

它是 Kafka 保证消息不丢失、高可用的核心机制。


1. 先搞清楚角色

一个 Partition 一定有:

  • Leader 副本:负责读写
  • Follower 副本:只同步数据,不对外提供服务
  • ISR :当前跟 Leader 保持同步的 Follower 集合(Leader 自己也在 ISR 里)

2. ISR 到底是什么?

ISR 是一个动态列表,里面包含:

  • Leader
  • 所有同步速度足够快、没有掉队的 Follower

满足两个条件才会在 ISR 里:

  1. Follower 与 Leader 网络连接正常
  2. Follower 同步的消息落后 Leader 不超过阈值
    默认:replica.lag.time.max.ms = 10000ms(10秒)

只要 Follower 在 10s 内没跟上,就会被踢出 ISR


3. ISR 有什么用?(核心作用)

① 保证消息不丢失

生产者 acks=-1/all 时:

消息必须被 ISR 中所有副本都写入成功,才返回成功。

这样即使 Leader 挂了,ISR 里一定有完整数据,不会丢消息。

② 选举新 Leader 只能从 ISR 里选

Kafka 有一条铁律:

新 Leader 必须从 ISR 中选举

不在 ISR 里的 Follower 数据是残缺的,绝对不能当 Leader,否则会丢数据。


4. 什么副本会被踢出 ISR?

  • 挂掉的 Follower
  • 网络卡顿、GC 停顿、同步太慢
  • 落后 Leader 超过 replica.lag.time.max.ms

踢出后,它就变成 OSR(Out-of-Sync Replicas)

恢复正常后,会重新追上 Leader,自动加回 ISR


5. 最小 ISR 机制(防脑裂、防丢数据)

配置:min.insync.replicas=2

含义:

  • ISR 里至少要有 2 个副本(Leader + 1 Follower)
  • 否则写入会直接失败,避免只有 Leader 一个人在 ISR 里,一旦挂掉就彻底丢数据。

6. 一句话总结 ISR

ISR = 跟 Leader 数据一致、同步正常的副本集合。
只有 ISR 里的副本才能被选为 Leader,只有 ISR 确认写入才算安全写入。


相关推荐
我登哥MVP15 小时前
Hadoop成长史-从Nutch子项目到大数据生态王者
java·大数据·hadoop·分布式·云原生·云计算
凯云-金山HIL16 小时前
打破仿真孤岛:基于凯云SimuRTS的分布式联合仿真系统架构深度解析
自动化测试·分布式·系统架构·etest·半实物仿真
Database_Cool_1 天前
HTAP数据库详解_阿里云PolarDB-X一体化行列存实现实时分析
分布式·阿里云·云计算
泰克教育官方账号1 天前
泰涨知识 | Shell脚本之一键启动和关闭Zookeeper脚本
分布式·zookeeper·云原生
添砖java_8571 天前
基于RabbitMQ实现的轻量队列测试报告
分布式·rabbitmq
Zhu7581 天前
使用腾讯CNB构建Hadoop定制容器镜像
大数据·hadoop·分布式
TTBIGDATA1 天前
【Ambari Plus】13.Spark 安装
大数据·hadoop·分布式·spark·ambari·sqoop·ambari plus
sunxunyong2 天前
Hadoop租户创建
大数据·hadoop·分布式
得物技术2 天前
得物 OceanBase 落地实践
数据库·分布式·架构
heimeiyingwang2 天前
【架构实战】分布式ID生成:从自增ID到雪花算法
分布式·架构