日志平台搭建第五章:Linux安装Kafka

相关链接
http://kafka.apache.org/downloads
1.使用Docker安装zookeeper
下载镜像:

复制代码
docker pull zookeeper:3.4.14

创建容器:

复制代码
docker run --name zookeeper \
-v /opt/data/zksingle:/data \
-p 2181:2181 \
-e ZOO_LOG4J_PROP="INFO,ROLLINGFILE" \
-d zookeeper:3.4.14

2.使用Docker安装Kafka

下载镜像:

复制代码
docker pull wurstmeister/kafka:2.12-2.3.1

创建容器:

复制代码
docker run -d --name kafka \
 -p 9103:9092 \
 --link zookeeper:zookeeper \
 --env KAFKA_BROKER_ID=100 \
 --env HOST_IP=192.168.128.130 \
 --env KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 \
 --env KAFKA_ADVERTISED_HOST_NAME=192.168.128.130 \
 --env KAFKA_ADVERTISED_PORT=9103 \
 --restart=always \
 --volume /etc/localtime:/etc/localtime \
 wurstmeister/kafka:2.12-2.3.1

注意:因为kafka依赖于zookeeper,所以一定要先启动zookeeper,再启动kafka

3.验证

使⽤zk节点数据验证启动情况

复制代码
#进入zookeeper
docker exec -it zookeeper sh

#执行bin/zkCli.sh 连接脚本
./bin/zkCli.sh

#查看节点信息
ls /brokers

在kafka中查看

复制代码
#进入kafka容器
docker exec -it kafka sh

#进入到/opt/kafka/bin目录
cd /opt/kafka/bin

#kafka-console-consumer.sh:客户端监听启动脚本
#kafka-console-producer.sh:消息发送端启动脚本

#客户端监听(该步会⾃动创建topic)
./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic demo -- from-beginning

#另起⼀个终端,验证发送
./kafka-console-producer.sh --broker-list localhost:9092 --topic demo

客户端:

发送端:

接受到信息的客户端:

相关推荐
Wo3Shi4七3 小时前
Kafka综合运用:怎么在实践中保证Kafka_高性能?
后端·kafka·消息队列
G探险者5 小时前
《深入理解 Nacos 集群与 Raft 协议》系列五:为什么集群未过半,系统就不可用?从 Raft 的投票机制说起
分布式·后端
G探险者5 小时前
《深入理解 Nacos 集群与 Raft 协议》系列一:为什么 Nacos 集群必须过半节点存活?从 Raft 协议说起
分布式·后端
G探险者5 小时前
《深入理解 Nacos 集群与 Raft 协议》系列四:日志复制机制:Raft 如何确保提交可靠且幂等
分布式·后端
G探险者5 小时前
《深入理解 Nacos 集群与 Raft 协议》系列三:日志对比机制:Raft 如何防止数据丢失与错误选主
分布式·后端
G探险者5 小时前
《深入理解 Nacos 集群与 Raft 协议》系列二:Raft 为什么要“选主”?选主的触发条件与机制详解
分布式·后端
Vesan,7 小时前
网络通讯知识——通讯分层介绍,gRPC,RabbitMQ分层
网络·分布式·rabbitmq·无人机
火龙谷8 小时前
【hadoop】相关集群开启命令
大数据·hadoop·分布式
网安INF10 小时前
CVE-2023-25194源码分析与漏洞复现(Kafka JNDI注入)
java·web安全·网络安全·kafka·漏洞·jndi注入
观无11 小时前
redis分布式锁
数据库·redis·分布式