kafka在windows环境部署

项目日志记录,使用到了kafka,但是部署环境存在windows环境

一、官网下载 https://kafka.apache.org/community/downloads/

选择自己适用的版本,本地环境为java11环境支持最高到4.0以下,我选用的为3.9.2

二、下载本地之后解压。

运行会报错:
修改配置\bin\windows\kafka-server-start.bat文件

原文件内容:

IF "%KAFKA_HEAP_OPTS%" EQU "" (

rem detect OS architecture

wmic os get osarchitecture | find /i "32-bit" >nul 2>&1

IF NOT ERRORLEVEL 1 (

rem 32-bit OS

set KAFKA_HEAP_OPTS=-Xmx512M -Xms512M

) ELSE (

rem 64-bit OS

set KAFKA_HEAP_OPTS=-Xmx1G -Xms1G

)

)

修改为:

IF "%KAFKA_HEAP_OPTS%" EQU "" (

rem 直接设置堆内存(默认为 1G,适用于大多数 64 位系统)

set KAFKA_HEAP_OPTS=-Xmx1G -Xms1G

)

三、配置本地环境并启动 Kafka

1. 生成 UUID(保存输出)

.\bin\windows\kafka-storage.bat random-uuid

2. 格式化(将 <your-uuid> 替换为实际值)

.\bin\windows\kafka-storage.bat format -t <your-uuid> -c .\config\kraft\server.properties

3. 启动 Kafka

复制代码
rem 启动 Kafka(带 log4j 配置)
java -Dlog4j.configuration=file:./config/log4j.properties -cp ".\libs\*;.\bin\windows" kafka.Kafka .\config\kraft\server.properties

出现以下日志属于正常

四、验证 Kafka 功能

1、创建主题(另开一个命令提示符窗口)

cd /d D:\kafka\kafka_2.12-3.9.0

.\bin\windows\kafka-topics.bat --create --topic test --bootstrap-server localhost:9092

预期输出:Created topic test.

2、发送消息(再开一个新窗口)

.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic test

输入一些文字(如 aaa),按回车。没有报错即成功。

3、接收消息(再开一个新窗口)

.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

会立刻看到之前发送的消息,之后生产者输入的新消息也会实时显示。

相关推荐
RobinXYuan6 小时前
【Kafka 源码手记】05 Broker 网络层与请求处理(中):Processor 事件循环与线上的字节
kafka·源码阅读
NiceZack7 小时前
Hadoop 部署全流程教程:从新装 CentOS 到伪分布式与完全分布式
hadoop·分布式·centos
傻啦嘿哟7 小时前
分布式爬虫架构:Redis+Scrapy打造企业级爬虫系统
分布式·爬虫·架构
坐吃山猪9 小时前
Kafka13-自定义分区器
kafka
starzy199010 小时前
Kafka请求进门口:Processor是怎么把请求读上来的
分布式·kafka
骑着蜗牛撵大象3271 天前
558 万美元训出 671B 模型:DeepSeek-V3 算法与系统的协同拆解
分布式·算法·moe·deepseek-v3·mla·fp8训练
德迅云安全-上官1 天前
德迅游戏盾:面向 TCP 业务的分布式云安全防护方案
分布式·tcp/ip·游戏
麻瓜code1 天前
分布式锁演进:从一个用户下两单,到 Redisson,我改了四版
分布式·wpf
starzy19901 天前
Kafka网络层第一道门:Acceptor线程是怎么启动的
大数据·kafka
skywalk81631 天前
hive —— 多机 AI Agent 协同的任务总线:分布式,多节点同时运行,保障不会宕机
人工智能·hive·分布式