CDH中重装Kafka

##事情缘由

之前测试集群kafka安装在01、02、04节点,但是01节点经常宕机,于是直接在CM页面上把01节点上的kafka broker手动删除了。。。

然后重新再03节点安装了新的kafka broker

于是kafka集群不能使用了!!!

##初始化kafka

(1)删除data文件数据

ll /var/local/kafka/data

ll /app/var/local/kafka/data

rm -rf /var/local/kafka/data/

rm -rf /app/var/local/kafka/data/

(2)删除Zookeeper的数据

zookeeper-client

ls /brokers

deleteall /brokers/topics

deleteall /kafka/brokers/topics

quit

重启kafka集群

kafka-topics --create --zookeeper 10.1.1.1:2181 --replication-factor 2 --partitions 3 --topic kafka_tmp_test

kafka-topics --bootstrap-server 10.1.1.1:9092 --delete --topic kafka_test

kafka-topics --list --bootstrap-server 10.1.218.129:9092

相关推荐
智码看视界15 小时前
技术选型指南:Pulsar vs Kafka:消息队列选型终极对比与压测
kafka·消息队列·pulsar·消息中间件·流处理·高吞吐·架构选型
俊哥大数据16 小时前
Flink1.20.3 实时消费 Kafka 数据并解析入湖 Paimon1.4.2 全流程实战
分布式·flink·kafka·数据湖·paimon
今年下半年2 天前
记录一次IBMS物联网项目的架构设计及技术栈应用
物联网·websocket·网络协议·tcp/ip·微服务·udp·kafka
Nano叶落8 天前
Kafka 消费积压排查入门:Docker 搭环境亲手制造一次 ‘消息堵死‘,10 分钟看懂 Lag
kafka
吉甫作诵9 天前
Kafka 集群安装与运维实战:消费组排查、Offset 重置与副本重分配
大数据·运维·分布式·kafka·消息队列
imDwAaY9 天前
消息队列四大核心问题:顺序性、幂等性、可靠性与一致性
学习·kafka·rabbitmq
wno7049 天前
Spring Boot整合Kafka
spring boot·kafka
音符犹如代码10 天前
Kafka 接入 AI 的三条路线:MCP 提案、会话记忆与实时上下文
java·大数据·ai·kafka
happy_king_zi10 天前
kafka两种部署模式的区别
kafka·消息队列·sre
happy_king_zi10 天前
Kafka 3.9.2 KRaft 模式三节点集群完整部署指南
kafka·消息队列