kafka中节点如何服役和退役

节点服役(添加新节点)

1.准备新节点:

安装 Kafka 和相关依赖。

配置 Kafka Broker 的 server.properties 文件,确保 broker.id 是唯一的,并且配置正确的 zookeeper.connect 地址。

重启网卡

2.启动新节点:

启动 Kafka Broker 服务。

3.验证新节点:

使用 kafka-topics.sh 工具查看新节点是否已经加入集群。

确认新节点在 ZooKeeper 中注册成功。

4.平衡分区:

使用 kafka-reassign-partitions.sh 工具重新分配分区,确保新节点上有适当的分区副本。

节点退役(移除旧节点)

1.停止生产者和消费者:

确保没有新的消息发送到即将退役的节点。

停止所有连接到该节点的生产者和消费者。

2..重新分配分区:

使用 kafka-reassign-partitions.sh 工具将退役节点上的分区重新分配到其他节点。

3.停止 Kafka Broker 服务:

停止即将退役的 Kafka Broker 服务。

4.从 ZooKeeper 中移除节点:

确保退役节点已经完全停止,并且所有分区已经重新分配。

使用 kafka-configs.sh 工具从 ZooKeeper 中移除退役节点的配置。

5.验证退役:

使用 kafka-topics.sh 工具检查退役节点上的分区是否已经完全移除。

相关推荐
Mr-Wanter8 小时前
底层架构设计浅解
java·分布式·微服务
武子康8 小时前
Java-183 OSS 上传实战:Java 原生与 Spring Boot 集成
java·开发语言·spring boot·分布式·spring·阿里云·oss
从零开始学习人工智能8 小时前
告别存储困境:RustFS 如何用内存安全重塑分布式对象存储
分布式·安全
bing.shao8 小时前
Golang 链接kafka 设置SASL_PLAINTEXT安全协议
分布式·安全·kafka
路边草随风8 小时前
java 实现 flink 读 kafka 写 iceberg
java·flink·kafka
后端小张8 小时前
【鸿蒙2025领航者闯关】鸿蒙生态共建:智慧医疗领域的分布式革新与实践
分布式·华为·harmonyos·鸿蒙·鸿蒙系统·鸿蒙2025领航者闯关·开发者年度总结
Hello.Reader8 小时前
Flink SQL + Kafka 实时统计部门人数
sql·flink·kafka
武子康11 小时前
Java-184 缓存实战:本地缓存 vs 分布式缓存(含 Guava/Redis 7.2)
java·redis·分布式·缓存·微服务·guava·本地缓存
ANYOLY17 小时前
分布式面试题库
分布式·面试·职场和发展
i***66501 天前
分布式推理框架 xDit
分布式