kafka集群配置

kafka版本: kafka_2.12-2.8.0

1.解压

root@node1 software\]# tar -zxf kafka_2.12-2.8.0.tgz -C /opt/module/ 2.修改环境变量 \[root@node1 software\]# vim /etc/profile 3.修改文件名 \[root@node1 module\]# mv kafka_2.12-2.8.0/ kafka212 4.进入config文件夹,修改server.properties文件 \[root@node1 config\]# vim ./server.properties 21 broker.id=0 36 advertised.listeners=PLAINTEXT://192.168.153.136:9092 60 log.dirs=/opt/module/kafka212/kfkdata 103 log.retention.hours=1680 123 zookeeper.connect=192.168.153.136:2181,192.168.153.137:2181,192.168.153.138:2181 127 delete.topic.enable=true 5.在Kafka212文件夹下创建kfkdata文件夹 \[root@node1 kafka212\]# mkdir kfkdata 6.分发Kafka和profile文件 \[root@node1 kafka212\]# scp -r /opt/module/kafka212/ root@node2:/opt/module/ \[root@node1 kafka212\]# scp -r /opt/module/kafka212/ root@node3:/opt/module/ \[root@node1 kafka212\]# scp /etc/profile root@node2:/etc/profile \[root@node1 kafka212\]# scp /etc/profile root@node3:/etc/profile 7.\[root@node1 kafka212\]# source /etc/profile 8.启动zookeeper服务 zkServer.sh start 9.启动Kafka服务 nohup kafka-server-start.sh /opt/module/kafka212/config/server.properties \& 10.创建topic kafka-topics.sh --create --zookeeper 192.168.153.136:2181, 192.168.153.137:2181, 192.168.153.138:2181 --topic njzb --partitions 3 --replication-factor 3 11.查看指定topic的详细信息 kafka-topics.sh --zookeeper 192.168.153.136:2181, 192.168.153.137:2181, 192.168.153.138:2181 --topic njzb 12.查看topic的offset(偏移量) kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 192.168.153.136:9092 --topic njzb 13.通过控制台发送消息 kafka-console-producer.sh --bootstrap-server 192.168.153.136:9092 --topic njzb 14.通过控制台订阅并接收消息 kafka-console-consumer.sh --bootstrap-server 192.168.153.138:9092 --topic njzb

相关推荐
江不清丶38 分钟前
Kafka重平衡(Rebalance)深度解析:原理、影响与优化策略
分布式·kafka
Coder_Boy_16 小时前
分布式系统核心技术完整梳理(含分库分表、分布式事务、熔断补偿)
jvm·分布式·spring·中间件
摇滚侠19 小时前
Java 项目教程《黑马商城-MQ 篇》,分布式架构项目,从开发到部署
java·分布式·架构
蜜獾云20 小时前
Kafka(4)-kafka生产环境规划部署
分布式·kafka
若水不如远方1 天前
分布式一致性协议(五):殊途同归 —— ZAB 协议与 ZooKeeper 架构
分布式·后端·zookeeper
星辰_mya1 天前
分布式锁:跨 JVM 的“工商局备案章”
jvm·分布式·面试
wanhengidc1 天前
服务器分布式存储的功能
运维·服务器·分布式
码云数智-大飞1 天前
分布式锁的三种实现方案:Redis、ZooKeeper与数据库的深度对比与选型指南
数据库·redis·分布式
无关86881 天前
Springboot集成kafka
spring boot·kafka
xUxIAOrUIII1 天前
【Kafka】快速入门
分布式·kafka