kafka在windows环境部署

项目日志记录,使用到了kafka,但是部署环境存在windows环境

一、官网下载 https://kafka.apache.org/community/downloads/

选择自己适用的版本,本地环境为java11环境支持最高到4.0以下,我选用的为3.9.2

二、下载本地之后解压。

运行会报错:
修改配置\bin\windows\kafka-server-start.bat文件

原文件内容:

IF "%KAFKA_HEAP_OPTS%" EQU "" (

rem detect OS architecture

wmic os get osarchitecture | find /i "32-bit" >nul 2>&1

IF NOT ERRORLEVEL 1 (

rem 32-bit OS

set KAFKA_HEAP_OPTS=-Xmx512M -Xms512M

) ELSE (

rem 64-bit OS

set KAFKA_HEAP_OPTS=-Xmx1G -Xms1G

)

)

修改为:

IF "%KAFKA_HEAP_OPTS%" EQU "" (

rem 直接设置堆内存(默认为 1G,适用于大多数 64 位系统)

set KAFKA_HEAP_OPTS=-Xmx1G -Xms1G

)

三、配置本地环境并启动 Kafka

1. 生成 UUID(保存输出)

.\bin\windows\kafka-storage.bat random-uuid

2. 格式化(将 <your-uuid> 替换为实际值)

.\bin\windows\kafka-storage.bat format -t <your-uuid> -c .\config\kraft\server.properties

3. 启动 Kafka

复制代码
rem 启动 Kafka(带 log4j 配置)
java -Dlog4j.configuration=file:./config/log4j.properties -cp ".\libs\*;.\bin\windows" kafka.Kafka .\config\kraft\server.properties

出现以下日志属于正常

四、验证 Kafka 功能

1、创建主题(另开一个命令提示符窗口)

cd /d D:\kafka\kafka_2.12-3.9.0

.\bin\windows\kafka-topics.bat --create --topic test --bootstrap-server localhost:9092

预期输出:Created topic test.

2、发送消息(再开一个新窗口)

.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic test

输入一些文字(如 aaa),按回车。没有报错即成功。

3、接收消息(再开一个新窗口)

.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

会立刻看到之前发送的消息,之后生产者输入的新消息也会实时显示。

相关推荐
树下水月1 小时前
python3 使用canal监听后,kafka数据同步从mysql到clickhouse数据库 完整复盘
数据库·mysql·kafka
Databuff1 小时前
使用Pinpoint作分布式链路跟踪系统
运维·分布式·运维开发·开源软件
传感器与混合集成电路1 小时前
分布式光纤测温DTS系统:ZDTS-P2000与X1000参数对比及找漏监测应用
分布式·数据分析
传感器与混合集成电路1 小时前
分布式光纤声波DAS测井系统:0.1Hz低频检测、0.1m采样间隔与6066m实井对比
分布式
MetaLite1 小时前
SpringBoot整合Caffeine-集群本地缓存如何保证分布式一致性
spring boot·分布式·缓存
jj_ccwgw20 小时前
Kafka 集群开机自启动配置指南
后端·kafka
肠畔码农21 小时前
深入分布式事务内核:从 2PC/XA 到 Seata AT 模式的架构演进与权衡
分布式·架构
ai小陈21 小时前
PyTorch多GPU分布式训练实战:从单卡脚本迁移到DDP
服务器·人工智能·pytorch·分布式·深度学习·ai·gpu算力
伟大的大威1 天前
三台 DGX Spark 部署 DeepSeek V4 Flash NVFP4:从零到可用教程
大数据·分布式·spark
JackSparrow4141 天前
Kafka(七)集成Apache Avro+Apicurio Schema Registry以保障生产者与消费者的消息兼容性
java·中间件·rpc·kafka·apache·avro·schema-registry