linux安装配置 kafka并简单使用

目录

[一 解压安装包](#一 解压安装包)

[二 修改配置](#二 修改配置)

[三 启动kafka](#三 启动kafka)

[四 简单使用 kafka](#四 简单使用 kafka)


一 解压安装包

这里提供了网盘资源

链接: https://pan.baidu.com/s/1wUxEQuiPB1wRsjJ-FPPu7Q?pwd=9rm7 提取码: 9rm7

这里安装包上传至/opt/insatll目录

解压至/opt/soft目录

复制代码
tar -zxf /opt/install/kafka_2.12-2.8.0.tgz -C /opt/soft

解压后改个名

复制代码
mv kafka_2.12-2.8.0/ kafka212

二 修改配置

新建一个消息存放目录

复制代码
mkdir -p /opt/soft/kafka212/kfkdata

修改配置文件

复制代码
cd kafka212/config/

 vim ./server.properties 

修改为自己的 ip

复制代码
advertised.listeners=PLAINTEXT://172.25.38.169:9092

设置消息存储位置

复制代码
log.dirs=/opt/soft/kafka212/kfkdata

设置消息存放时间,超过时间删除,这里单位是小时

复制代码
log.retention.hours=1680

这里可以不做修改也可以改成自己的 ip

复制代码
zookeeper.connect=localhost:2181

使我们可以删除 topic

复制代码
delete.topic.enable=true

修改环境变量

复制代码
vim /etc/profile

#KAFKA
export KAFKA_HOME=/opt/soft/kafka212
export PATH=$KAFKA_HOME/bin:$PATH

修改完后 source 一下

复制代码
 source /etc/profile

三 启动kafka

启动 kafka 之前必须先启动zookeeper

复制代码
zkServer.sh start

nohup kafka-server-start.sh  /opt/soft/kafka212/config/server.properties &
--或直接
kafka-server-start.sh

四 简单使用 kafka

创建topic

复制代码
kafka-topics.sh --create --zookeeper 172.25.38.169:2181 --topic kb23 --partitions 1 --replication-factor 1

查看 topic 列表

复制代码
kafka-topics.sh  --zookeeper 172.25.38.169:2181 --list

新建两个窗口,分别作为消费者和生产者

生产者命令行界面

复制代码
kafka-console-producer.sh --topic kb23 --broker-list 172.25.38.169:9092

消费者命令行界面

复制代码
kafka-console-consumer.sh --topic kb23 --bootstrap-server 172.25.38.169:9092 --from-beginning

生产者界面发送消息,消费者界面将能收到消息

--from-beginning这个参数表示消费者接受以前的所有消息,不加则表示从最新的消息开始接收

查看 topic 详情

复制代码
 kafka-topics.sh  --zookeeper 172.25.38.169:2181 --describe --topic kb23

查看队列消息数量

复制代码
kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 172.25.38.169:9092 --topic kb23

删除 topic(执行完后将 topic 标记为 delete 状态,下次重启则被删除)

复制代码
kafka-topics.sh  --zookeeper 172.25.38.169:2181 --delete --topic kb23
相关推荐
FoldWinCard9 小时前
D5 Linux 网络及端口命令
linux·运维·服务器
零涂毕业设计10 小时前
毕业设计模块开发-OLED显示屏(IIC协议0.96寸)STM32 ESP32 FPGA Linux驱动免费分享
linux·stm32·单片机·嵌入式·esp32·fpga·oled
tedcloud12310 小时前
OmniRoute怎么部署?开源AI模型路由平台Linux部署教程
linux·服务器·人工智能·开源·音视频
霸道流氓气质10 小时前
KMS 密钥管理服务(Key Management Service)原理与实践
linux·服务器·数据库
SakitamaX10 小时前
LVS(Linux Virtual Server)概念详解
linux·运维·lvs
小张同学a.11 小时前
Linux系统管理
linux·运维
阿龙的工作记录11 小时前
深入理解Linux设备驱动模型
linux·嵌入式硬件·工作记录
代码村新手11 小时前
Linux的基本指令
linux·运维·服务器
hkj880812 小时前
Ubuntu 切换java版本
java·linux·ubuntu
爱吃提升13 小时前
python 分布式爬虫、爬虫合规与综合实战项目
分布式·爬虫·python