kafka集群配置

kafka版本: kafka_2.12-2.8.0

1.解压

root@node1 software\]# tar -zxf kafka_2.12-2.8.0.tgz -C /opt/module/ 2.修改环境变量 \[root@node1 software\]# vim /etc/profile 3.修改文件名 \[root@node1 module\]# mv kafka_2.12-2.8.0/ kafka212 4.进入config文件夹,修改server.properties文件 \[root@node1 config\]# vim ./server.properties 21 broker.id=0 36 advertised.listeners=PLAINTEXT://192.168.153.136:9092 60 log.dirs=/opt/module/kafka212/kfkdata 103 log.retention.hours=1680 123 zookeeper.connect=192.168.153.136:2181,192.168.153.137:2181,192.168.153.138:2181 127 delete.topic.enable=true 5.在Kafka212文件夹下创建kfkdata文件夹 \[root@node1 kafka212\]# mkdir kfkdata 6.分发Kafka和profile文件 \[root@node1 kafka212\]# scp -r /opt/module/kafka212/ root@node2:/opt/module/ \[root@node1 kafka212\]# scp -r /opt/module/kafka212/ root@node3:/opt/module/ \[root@node1 kafka212\]# scp /etc/profile root@node2:/etc/profile \[root@node1 kafka212\]# scp /etc/profile root@node3:/etc/profile 7.\[root@node1 kafka212\]# source /etc/profile 8.启动zookeeper服务 zkServer.sh start 9.启动Kafka服务 nohup kafka-server-start.sh /opt/module/kafka212/config/server.properties \& 10.创建topic kafka-topics.sh --create --zookeeper 192.168.153.136:2181, 192.168.153.137:2181, 192.168.153.138:2181 --topic njzb --partitions 3 --replication-factor 3 11.查看指定topic的详细信息 kafka-topics.sh --zookeeper 192.168.153.136:2181, 192.168.153.137:2181, 192.168.153.138:2181 --topic njzb 12.查看topic的offset(偏移量) kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 192.168.153.136:9092 --topic njzb 13.通过控制台发送消息 kafka-console-producer.sh --bootstrap-server 192.168.153.136:9092 --topic njzb 14.通过控制台订阅并接收消息 kafka-console-consumer.sh --bootstrap-server 192.168.153.138:9092 --topic njzb

相关推荐
DemonAvenger4 天前
Kafka性能调优:从参数配置到硬件选择的全方位指南
性能优化·kafka·消息队列
初次攀爬者5 天前
ZooKeeper 实现分布式锁的两种方式
分布式·后端·zookeeper
yumgpkpm6 天前
AI视频生成:Wan 2.2(阿里通义万相)在华为昇腾下的部署?
人工智能·hadoop·elasticsearch·zookeeper·flink·kafka·cloudera
予枫的编程笔记6 天前
【Kafka高级篇】避开Kafka原生重试坑,Java业务端自建DLQ体系,让消息不丢失、不积压
java·kafka·死信队列·消息中间件·消息重试·dlq·java业务开发
倚肆6 天前
在 Windows Docker 中安装 Kafka 并映射 Windows 端口
docker·kafka
断手当码农6 天前
Redis 实现分布式锁的三种方式
数据库·redis·分布式
Sheffield6 天前
如果把ZooKeeper按字面意思比作动物园管理员……
elasticsearch·zookeeper·kafka
初次攀爬者6 天前
Redis分布式锁实现的三种方式-基于setnx,lua脚本和Redisson
redis·分布式·后端
雪碧聊技术6 天前
kafka的下载、安装、启动
kafka