记录一次云服务器使用docker搭建kafka的过程

创建网络

一定要将zookeeper注册中心与kafka建在一个network中,不然在springboot 集成 kakfa的demo测试代码中进行消息发送时会超时,报错: E x c e p t i o n t h r o w n w h e n s e n d i n g a m e s s a g e w i t h k e y = ' n u l l ' Exception thrown when sending a message with key='null' Exceptionthrownwhensendingamessagewithkey='null'

bash 复制代码
docker network create zk-ka-net

docker启动zookeeper注册中心

bash 复制代码
docker pull wurstmeister/zookeeper
bash 复制代码
docker run -d --name zookeeper --network zk-ka-net -p 2181:2181 -t wurstmeister/zookeeper

docker启动kafka服务

bash 复制代码
docker pull wurstmeister/kafka
bash 复制代码
docker run -d --name kafka -p 9092:9092 --network zk-ka-net --link zookeeper:zookeeper -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://外网ip:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 wurstmeister/kafka

基本使用

  1. 进入容器
bash 复制代码
docker exec -it ${CONTAINER ID} /bin/bash
  1. 进入kafka的bin目录下
bash 复制代码
echo $PATH
cd /opt/kafka/bin
  1. 创建topic
bash 复制代码
kafka-topics.sh --create --zookeeper zookeeper:2181 --replication-factor 1 --partitions 1 --topic my_topic
  1. 运行生产者
bash 复制代码
kafka-console-producer.sh --broker-list 外网ip:9092 --topic my_topic

6.消费topic

bash 复制代码
kafka-console-consumer.sh --bootstrap-server 外网ip:9092 --from-beginning --topic my_topic

springboot 集成 kakfa代码:https://github.com/ZYNORl/project-demo/tree/main

附带一个本地启动的docker命令
bash 复制代码
docker run -d --name kafka -p 9092:9092 --link zookeeper:zookeeper -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://127.0.0.1:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 wurstmeister/kafka
相关推荐
LaLaLa_OvO4 分钟前
spring boot2.0 里的 javax.validation.Constraint 加入 service
java·数据库·spring boot
Solar20255 分钟前
构建高可靠性的机械设备企业数据采集系统:架构设计与实践指南
java·大数据·运维·服务器·架构
慧一居士8 分钟前
jdk1.8 及之后的新版本介绍,新特性示例总结
java
eybk10 分钟前
拖放pdf转化为txt文件多进程多线程合并分词版
java·python·pdf
D_FW16 分钟前
数据结构第四章:串
java·开发语言
Tao____16 分钟前
物联网平台二开
java·网络·物联网·mqtt·网络协议
Dylan的码园17 分钟前
JAVA中对象的几种比较
java·开发语言
emma_dd19 分钟前
final关键字
java
SimonKing21 分钟前
J人程序员的用屏技巧:软硬结合,让编码效率起飞
java·后端·程序员
小北方城市网22 分钟前
第 4 课:微服务 API 网关设计与接口全生命周期管理|统一入口与接口治理实战
java·大数据·运维·人工智能·python·深度学习·数据库架构