Kafka与Zookeeper在linux上的下载记录

1.先安装Zookeeper。

(1)打开虚拟机,使用FileZilla软件将安装包apache-zookeeper-3.5.7-bin.tar.gz上传到/opt/software目录。(直接拖拽或者右键需要上传的软件点击"上传")。

(2)安装JDK并配置环境变量,此处略。(已安装过)

(3)解压缩ZooKeeper安装包至/opt/module目录下(使用putty软件或者直接在虚拟机中操作)

root@sias \~# cd /opt/software/

root@sias module]# tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz -C /opt/module/

(3)将/opt/module/zookeeper-3.5.7/conf这个路径下的zoo_sample.cfg复制后,命名为zoo.cfg;

root@sias conf# cd /opt/module/apache-zookeeper-3.5.7-bin/conf/

root@sias conf# cp zoo_sample.cfg zoo.cfg

(4) 修改路径为zkdir

root@sias conf# vi zoo.cfg

修改如下:

dataDir=/opt/module/apache-zookeeper-3.5.7-bin/zkdir

(5) 进入bin目录,启动ZooKeeper服务

root@sias bin# cd /opt/module/apache-zookeeper-3.5.7-bin/bin

root@sias bin# ./zkServer.sh start

(6)使用jps命令检查是否存在以下一个节点QuorumPeerMain,这表明Zookeeper安装成功。

2.安装kafka。

root@sias software# tar -xzf kafka_2.12-3.0.0.tgz -C /opt/module/

root@sias software# cd /opt/module/kafka_2.12-3.0.0/

root@sias kafka_2.12-3.0.0# vi config/server.properties

broker.id=0

listeners=PLAINTEXT://192.168.100.20:9092

log.dirs=/tmp/kafka-logs

zookeeper.connect=localhost:2181

root@sias bin# cd /opt/module/kafka_2.12-3.0.0/bin/

root@sias bin# ./kafka-server-stop.sh**(若虚拟机原本就没有kafka,则不需要这个命令,否则会出现以下报错)**

root@sias bin# ./kafka-server-start.sh -daemon ../config/server.properties

测试 Kafka,为了验证 Kafka 是否正常工作,可以创建一个主题并发送和接收消息。

创建主题------test

打开一个新的终端窗口,使用以下命令创建一个名为 ​​test​​ 的主题:

root@sias kafka_2.12-3.0.0# ./bin/kafka-topics.sh --create --topic test --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1

开启一个新窗口,执行下面命令,开启生产者:

root@sias kafka_2.12-3.0.0# .bin/kafka-console-producer.sh --topic test --bootstrap-server localhost:9092

在生产者控制台中输入一些消息,按回车键发送。

接收消息则打开一个新的终端窗口。

启动完可以切换到logs目录下查看日志,再打开两个shell页面,分别为生产和消费使用。

启动生产者服务,bin目录下。

root@sias \~# cd /opt/module/kafka_2.12-3.0.0/bin/

root@sias bin# ./kafka-console-producer.sh --topic test --bootstrap-server 192.168.100.20:9092

启动消费者服务:

root@sias bin# ./kafka-console-consumer.sh --topic test --bootstrap-server 192.168.100.20:9092

这是验证效果,此时可证明kafka安装成功。

相关推荐
yumgpkpm3 小时前
Acceldata ODP(Open Data Platform)3.3.6.4(RHEL9)保姆级完整安装手册
大数据·人工智能·hive·hadoop·kafka·hbase·cloudera
用户14944848132010 小时前
Raft 为什么取代了 Paxos?从 DLedger 和 KRaft 的技术选型聊起
kafka·raft
此时不提桶,更待何时10 小时前
06-16-B-Kafka面试与生产事故实战
分布式·面试·kafka
阿里云云原生10 小时前
Kafka 不止于消息:阿里云发布面向 AI 的流算湖一体化实时数据平台
kafka
龙腾-虎跃12 小时前
Docker 一键启动服务合集:Redis、MySQL、Kafka、MinIO、Prometheus 等(网盘转存防失效)
redis·mysql·docker·kafka·prometheus·小龙虾·miniio
此时不提桶,更待何时1 天前
06-12-A-Kafka存储深水区与源码解析详解
分布式·kafka·linq
此时不提桶,更待何时1 天前
06-15-A-Kafka生态集成与流处理详解
分布式·kafka
做个文艺程序员1 天前
MinIO第05篇:MinIO事件通知机制与Kafka集成——构建SaaS平台的异步文件处理管道
kafka·消息队列·springboot·minio·事件驱动·异步处理
天空鸟_时光不老1 天前
07-检查点与状态持久化
java·人工智能·spring boot·spring·spring cloud·kafka·maven
此时不提桶,更待何时2 天前
06-13-A-Kafka客户端与协议深入详解
分布式·kafka