linux安装配置 kafka并简单使用

目录

[一 解压安装包](#一 解压安装包)

[二 修改配置](#二 修改配置)

[三 启动kafka](#三 启动kafka)

[四 简单使用 kafka](#四 简单使用 kafka)


一 解压安装包

这里提供了网盘资源

链接: https://pan.baidu.com/s/1wUxEQuiPB1wRsjJ-FPPu7Q?pwd=9rm7 提取码: 9rm7

这里安装包上传至/opt/insatll目录

解压至/opt/soft目录

复制代码
tar -zxf /opt/install/kafka_2.12-2.8.0.tgz -C /opt/soft

解压后改个名

复制代码
mv kafka_2.12-2.8.0/ kafka212

二 修改配置

新建一个消息存放目录

复制代码
mkdir -p /opt/soft/kafka212/kfkdata

修改配置文件

复制代码
cd kafka212/config/

 vim ./server.properties 

修改为自己的 ip

复制代码
advertised.listeners=PLAINTEXT://172.25.38.169:9092

设置消息存储位置

复制代码
log.dirs=/opt/soft/kafka212/kfkdata

设置消息存放时间,超过时间删除,这里单位是小时

复制代码
log.retention.hours=1680

这里可以不做修改也可以改成自己的 ip

复制代码
zookeeper.connect=localhost:2181

使我们可以删除 topic

复制代码
delete.topic.enable=true

修改环境变量

复制代码
vim /etc/profile

#KAFKA
export KAFKA_HOME=/opt/soft/kafka212
export PATH=$KAFKA_HOME/bin:$PATH

修改完后 source 一下

复制代码
 source /etc/profile

三 启动kafka

启动 kafka 之前必须先启动zookeeper

复制代码
zkServer.sh start

nohup kafka-server-start.sh  /opt/soft/kafka212/config/server.properties &
--或直接
kafka-server-start.sh

四 简单使用 kafka

创建topic

复制代码
kafka-topics.sh --create --zookeeper 172.25.38.169:2181 --topic kb23 --partitions 1 --replication-factor 1

查看 topic 列表

复制代码
kafka-topics.sh  --zookeeper 172.25.38.169:2181 --list

新建两个窗口,分别作为消费者和生产者

生产者命令行界面

复制代码
kafka-console-producer.sh --topic kb23 --broker-list 172.25.38.169:9092

消费者命令行界面

复制代码
kafka-console-consumer.sh --topic kb23 --bootstrap-server 172.25.38.169:9092 --from-beginning

生产者界面发送消息,消费者界面将能收到消息

--from-beginning这个参数表示消费者接受以前的所有消息,不加则表示从最新的消息开始接收

查看 topic 详情

复制代码
 kafka-topics.sh  --zookeeper 172.25.38.169:2181 --describe --topic kb23

查看队列消息数量

复制代码
kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 172.25.38.169:9092 --topic kb23

删除 topic(执行完后将 topic 标记为 delete 状态,下次重启则被删除)

复制代码
kafka-topics.sh  --zookeeper 172.25.38.169:2181 --delete --topic kb23
相关推荐
星恒随风2 小时前
Linux进程信号(一):从Ctrl+C到kill、raise、alarm,深入理解信号的概念与产生原理
linux·c语言·笔记·学习·状态模式
MinterFusion2 小时前
如何在开放麒麟(openKylin)下安装GTK(v0.1.0)
linux·操作系统·软件安装·gtk·明德融创·openkylin·linux图形软件开发
Lzg_na2 小时前
FAT文件系统详解
linux
看着博客敲代码2 小时前
enum4linux 报 Server doesn‘t allow session 与 SMB 主机信息枚举
linux·安全·网络安全
重生之小比特2 小时前
【Linux系统】09 环境变量
linux·运维·服务器
Teecertlabs3 小时前
【机密计算顶会解读】15:LDR——面向嵌入式TEE系统的高效安全Linux驱动
linux·操作系统·机密计算·可信执行环境
程序员-Benothing3 小时前
Linux网络性能分析:ss、netstat、iftop、sar实战
linux·运维·服务器
其实防守也摸鱼3 小时前
Codex 下载与本地部署实战指南
linux·服务器·前端·数据库·算法·ai
岳麓丹枫0013 小时前
故障案例分析:系统负载居高不下,多次出现 OOM
linux·postgresql
2401_862880823 小时前
Linux中断、中断子系统、内核同步互斥机制
linux·驱动开发·嵌入式硬件