windows本地kafka和zookeeper单机版

文章目录


一、安装zookeeper

1.下载zookeeper:zookeeper下载

此文使用版本:apache-zookeeper-3.6.4

2.添加配置文件

在config目录下复制一份zoo_sample.cfg文件到同级目录,然后更改名称为zoo.cfg

java 复制代码
tickTime=2000
initLimit=10
syncLimit=5
clientPort=2181
dataDir=D:\\xxx\\apache-zookeeper-3.6.4-bin\\data
dataLogDir=D:\\xxx\\apache-zookeeper-3.6.4-bin\\log

3.配置windows系统环境变量(可以百度)

1).新建zookeeper系统变量

java 复制代码
变量名:ZOOKEEPER_HOME
变量值:D:\xxx\apache-zookeeper-3.6.4-bin

2).添加配置path

java 复制代码
%ZOOKEEPER_HOME%\bin

4.随便打开一个cmd

1).cmd启动zookeeper服务端运行

java 复制代码
C:\Users\xxx>zkCli

2).cmd启动zookeeper客户端(可以不用启动,截图略)

java 复制代码
C:\Users\xxx>zkCli

二、安装kafka

1.下载kafka

kafka 下载

此文下载的kafka版本:kafka_2.12-3.5.1

2.修改config目录下的server.properties

bash 复制代码
zookeeper.connect=localhost:2181
log.dirs=D:\\xxx\\kafka_2.12-3.5.1\\logs

server.properties配置完后,需要在kafka_2.12-3.5.1目录下建logs目录

三,开始运行zookeeper和kafka

1.运行一个zookeeper server

2.启动kafka 服务

启动服务(进到kafka安装文件目录)

bash 复制代码
.\bin\windows\kafka-server-start.bat .\config\server.properties

3.运行kafka 创建topic,查看topic等

进入解压kafka对应的盘,执行bat命令

bash 复制代码
#创建主题
.\kafka-topics.bat --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 5 --topic test

#查询主题
.\kafka-topics.bat --bootstrap-server localhost:9092 --list

#启动消费者消费消息
.\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

#启动生产者
.\kafka-console-producer.bat --broker-list localhost:9092 --topic test

总结:上面总共开启了3个cmd。zookeeper配置环境变量,在cmd中可以不指定路径,直接执行。kafka没有配置环境变量,要有路径执行。

其他

1).当向kafka中发送数据时,发送的明明是中文没有乱码,程序读取时是乱码。在排查时发现开启一个cmd 消费刚刚发送的topic数据,发现已经乱码了。下面是解决kafka中文乱码问题:

bash 复制代码
1.打开Kafka的配置文件server.properties,可以使用文本编辑器打开。

2.在文件中查找producer.encoding属性,如果没有则可以手动添加。

3.将属性值设置为所需的编码格式,例如UTF-8。

4.保存文件并重启Kafka服务。

或使用命令指定utf-8

bash 复制代码
设置完成后,使用kafka-console-producer命令发送消息时,就会使用所设置的编码格式。例如:
.\kafka-console-producer --broker-list localhost:9092 --topic test --property "producer.encoding=UTF-8"

该命令将使用UTF-8编码格式发送消息到名为test的主题。

相关推荐
yyk3332413 小时前
Flink详细讲解
大数据·flink
Funlang14 小时前
在 Windows NT 3.5 上跑 Fun
windows
飞奔的瓜牛15 小时前
Kafka 生产实践指南:使用要点、性能优化与运维维护
中间件·性能优化·kafka
xx z1 天前
directx修复工具下载(DirectX Repair 增强版 使用说明)
windows·系统·工具·软件
xx z2 天前
pcl2启动器下载(Minecraft PCL2 启动器 最新版 安装与使用说明)
windows·游戏·工具·软件
凯瑟琳.奥古斯特2 天前
我开源了一个 Windows 截图取字工具:全局热键 + 离线 OCR + 标注打码,不上传任何数据
windows·ocr
Funlang3 天前
在 Windows 95 上跑 Fun
windows
ö Constancy3 天前
一台电脑的硬件组成与作用:按功能分类详解(Windows 与 Linux 视角)
linux·windows·电脑
雪落漂泊4 天前
Liunux进程(七):程序控制篇(中)
linux·运维·windows
承渊政道4 天前
Fooocus本地AI绘图教程:Windows部署、低门槛生图与远程访问
人工智能·windows·cpolar·fooocus·生图