Kafka环境搭建与相关启动命令

一、Kafka环境搭建

点击下载kafka_2.11-2.3.1.tgz文件链接

1、上传kafka_2.11-2.3.1.tgz,解压kafka_2.11-2.3.1.tgz,得到kafka_2.11-2.3.1文件夹

1)上传

#使用mobaxterm将 kafka_2.11-2.3.1.tgz 传入tools文件夹

#用下面代码进入tools文件夹

bash 复制代码
cd /tools

#查看传入成功没

bash 复制代码
ll
2)解压到training文件夹
bash 复制代码
tar -zxvf kafka_2.11-2.3.1.tgz -C /training
bash 复制代码
cd /training

2、 kafka需要安装zookeeper使用,但kafka集成zookeeper,在单机搭建时可直接使用。使用需配置kafka_2.11-2.3.1/config 下的"zookeeper.properties"

bash 复制代码
cd kafka_2.11-2.3.1/config

3、配置"zookeeper.properties"。修改dataDir和clientPort。前者是快照存放地址(自己随意配置),后者是客户端连接zookeeper服务的端口。默认端口2181 最好默认不修改

1)进入zookeeper.properties配置
bash 复制代码
vi zookeeper.properties
2)配置内容,修改dataDir和clientPort。前者是快照存放地址(自己随意配置可以和我一样),后者是客户端连接zookeeper服务的端口。默认端口2181 最好默认不修改

4、配置kafka_2.11-2.3.1/config下的"server.properties",修改log.dirs和zookeeper.connect。前者是日志存放文件夹,后者是zookeeper连接地址(端口和clientPort保持一致)

bash 复制代码
vi server.properties
1)找 ### Log Basics ### 添加如图所示
bash 复制代码
log.dirs=/training/kafka_2.11-2.3.1/logs
2)找 ### Zookeeper ### 添加如图所示,注意修改主机名

#查询主机名我的主机名字是niit:

bash 复制代码
hostname

#配置截图

bash 复制代码
zookeeper.connect=niit:2181
listeners=PLAINTEXT://niit:9092
num.network.threads=3
num.io.threads=8
socket.send.buffer.bytes=102400
socket.receive.buffer.bytes=102400
socket.request.max.bytes=104857600
num.partitions=3
num.recovery.threads.per.data.dir=1
offsets.topic.replication.factor=1
transaction.state.log.replication.factor=1
transaction.state.log.min.isr=1
log.retention.hours=168
log.segment.bytes=1073741824
log.retention.check.interval.ms=300000
zookeeper.connection.timeout.ms=6000
group.initial.rebalance.delay.ms=0
auto.create.topics.enable=true
delete.topics.enable=true

到此,kafka的单机环境就搭建成功了。

二、kafka的相关命令

1、开启kafka自带zookeeper

1)窗口1
bash 复制代码
cd /training/kafka_2.11-2.3.1/
bash 复制代码
./bin/zookeeper-server-start.sh ./config/zookeeper.properties
2)窗口2
bash 复制代码
cd /training/kafka_2.11-2.3.1/
bash 复制代码
./bin/zookeeper-server-start.sh -daemon ./config/zookeeper.properties


2、开启kafka

1)窗口2
bash 复制代码
cd /training/kafka_2.11-2.3.1/
bash 复制代码
./bin/kafka-server-start.sh ./config/server.properties
2)窗口3
bash 复制代码
cd /training/kafka_2.11-2.3.1/
bash 复制代码
./bin/kafka-server-start.sh -daemon ./config/server.properties

使用jps命令查看进程。安装配置完毕。

相关推荐
熊文豪1 小时前
Windows安装RabbitMQ保姆级教程
windows·分布式·rabbitmq·安装rabbitmq
Amy1870211182312 小时前
分布式光纤传感:照亮每一个角落的“温度感知神经”
分布式
Jabes.yang13 小时前
Java求职面试:从Spring Boot到Kafka的技术探讨
java·spring boot·面试·kafka·互联网大厂
玉石观沧海15 小时前
高压变频器故障代码解析F67 F68
运维·经验分享·笔记·分布式·深度学习
小马爱打代码16 小时前
分布式锁:原理算法和使用建议
分布式·算法
一叶飘零_sweeeet18 小时前
从 “黑盒“ 到 “透明“:SkyWalking 实战指南 —— 让微服务问题无所遁形
分布式·微服务·skywalking·分布式链路追踪
ArabySide19 小时前
【ASP.NET Core】分布式场景下ASP.NET Core中JWT应用教程
分布式·后端·asp.net core
还是大剑师兰特20 小时前
Kafka 面试题及详细答案100道(91-95)-- 问题排查与解决方案1
kafka·大剑师·kafka面试题·kafka教程
小马爱打代码21 小时前
zookeeper:一致性原理和算法
分布式·zookeeper·云原生
Cikiss1 天前
图解 bulkProcessor(调度器 + bulkAsync() + Semaphore)
java·分布式·后端·elasticsearch·搜索引擎