消息中间件ApacheKafka在windows简单安装

一.背景

之前公司需要API网关管理软件ApacheShenYu,我相信把调用的记录都存到一个数据库。他支持日志推送到kafka,所以,我准备尝试一下通过kafka接收调用的日志信息。第一步,当然是安装kafka了。

二.ApacheKafka的下载

打开下载界面Apache Kafka

我点击的是这个。

三.ApacheKafka在windows下面的安装

kafka依赖于zookeeper,都在下载的包里面了。安装解压后需要放到盘符的根目录下面,我之前没有放根目录有点问题,后续空了再查找详细原因。

1.解压到D:\kafka_2.13-3.7.1

2.创建目录

D:\kafka_2.13-3.7.1\data\zookeeper

D:\kafka_2.13-3.7.1\data\kafka

3.修改配置文件

1)D:\kafka_2.13-3.7.1\config\zookeeper.properties

修改dataDir即可

dataDir=D:/kafka_2.13-3.7.1/data/zookeeper

2)D:\kafka_2.13-3.7.1\config\server.properties

修改 log.dirs即可

log.dirs=D:/kafka_2.13-3.7.1/data/kafka

四.ApacheKafka启动

1.先启动zookeeper

打开cmd,运行启动命令及参数

复制代码
cd /d D:\kafka_2.13-3.7.1\bin\windows
zookeeper-server-start.bat ../../config/zookeeper.properties

仔细看,如果有INFO binding to port 0.0.0.0/0.0.0.0:2181 (org.apache.zookeeper.server.NIOServerCnxnFactory),应该就启动正常了。

2.启动kafka

打开cmd,运行启动命令及参数

复制代码
cd /d D:\kafka_2.13-3.7.1\bin\windows
kafka-server-start.bat ../../config/server.properties

如果有下面两句,一般就没有问题了。

Connecting to zookeeper on localhost:2181 (kafka.server.KafkaServer)

Initializing a new session to localhost:2181. (kafka.zookeeper.ZooKeeperClient)

五.测试ApacheKafka是否正常

1.创建一个topic

新打开一个cmd窗口,输入如下两个命令:

复制代码
cd /d D:\kafka_2.13-3.7.1\bin\windows
kafka-console-producer.bat  --bootstrap-server localhost:9092 --topic test-topic

这样,我们就创建了一个叫test-topic的主题了。

2.接收消息

再新打开一个cmd窗口,输入如下两个命令:

复制代码
cd /d D:\kafka_2.13-3.7.1\bin\windows
kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test-topic

这样,我们开始监听test-topic主题了。

3.发送与接收查看

在刚刚创建窗口输入hello,你就可以在监听窗口收到hello了。如下图:

六.中文乱码的处理

唉!手贱,本想写文章就简单说下思路就行了。但是输入了个中文,看到了乱码,我就受不了,解决吧!

暂时留在这里,后续修改。。。

七.退出

开发状态,也不用管优雅了。直接关闭相关的cmd窗口,就退出了topic的监听,关闭了kafka、zookeeper了。后面生产部署才去了解优雅的启动与关闭吧!

相关推荐
茫茫人海一粒沙7 小时前
理解 Confluent Schema Registry:Kafka 生态中的结构化数据守护者
分布式·kafka
武子康9 小时前
大数据-30 ZooKeeper Java-API 监听节点 创建、删除节点
大数据·后端·zookeeper
dessler10 小时前
Kafka-消费者(Consumer)和消费者组(Consumer Group)
linux·运维·kafka
找不到、了10 天前
kafka消费的模式及消息积压处理方案
java·kafka
超级小忍10 天前
Spring Boot 集成 Apache Kafka 实战指南
spring boot·kafka·apache
小葛呀10 天前
互联网大数据求职面试:从Zookeeper到Flink的技术探讨
大数据·redis·zookeeper·面试·flink·互联网·yarn
小韩加油呀10 天前
logstash读取kafka日志写到oss归档存储180天
kafka·logstash
小白上线*^_^*11 天前
Kafka与Zookeeper在linux上的下载记录
zookeeper·kafka·linux上的下载与安装
Edingbrugh.南空11 天前
Kafka Streams架构深度解析:从并行处理到容错机制的全链路实践
架构·kafka
茫茫人海一粒沙11 天前
Kafka 原理与核心机制全解析
kafka