【kafka】使用docker启动kafka

1.环境准备

docker拉取zookeeper镜像

bash 复制代码
docker pull zookeeper:3.4.14

创建zookeeper容器,默认端口号为2181

bash 复制代码
docker run -d --name zookeeper -p 2181:2181 zookeeper:3.4.14

拉取kafka镜像

bash 复制代码
docker pull wurstmeister/kafka:2.12-2.3.1

创键kafka容器,默认端口号为9092

bash 复制代码
docker run -d --name kafka \
--env KAFKA_ADVERTISED_HOST_NAME=192.168.117.80 \
--env KAFKA_ZOOKEEPER_CONNECT=192.168.117.80:2181 \
--env KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.117.80:9092 \
--env KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \
--env KAFKA_HEAP_OPTS="-Xmx256M -Xms256M" \
--net=host wurstmeister/kafka:2.12-2.3.1

查看是否运行成功

bash 复制代码
docker logs -f [进程号]

2.创建主题

docker进入kafka容器

bash 复制代码
docker exec -it 5af197f9ce2a /bin/bash

进入bin目录

首先找到kafka的bin

bash 复制代码
find / -name kafka

cd进去即可

bash 复制代码
cd /opt/kafka/bin

创建topic

bash 复制代码
kafka-topics.sh --create --zookeeper 192.168.117.80:2181 --partitions 1 --replication-factor 1 --topic test

查看topic

bash 复制代码
kafka-topics.sh --list --zookeeper 192.168.117.80:2181

3.创建消息生产者和消费者

创建生产者

bash 复制代码
kafka-console-producer.sh --broker-list 192.168.117.80:9092 --topic test

创建消息消费者

从启一个容器实例

根据项目步骤进入到bin目录

创建消息消费者

bash 复制代码
kafka-console-consumer.sh --bootstrap-server 192.168.117.80:9092 --topic test

4.测试

此时是消费最后一个消息后偏移量+1的消息

若想消费所有消息

bash 复制代码
kafka-console-consumer.sh --bootstrap-server 192.168.117.80:9092 --topic test --from-beginning
相关推荐
飞川撸码19 小时前
读扩散、写扩散(推拉模式)详解 及 混合模式(实际场景分析及相关问题)
分布式·后端·架构
青云交21 小时前
Java 大视界 -- 基于 Java 的大数据实时流处理在工业物联网设备故障预测与智能运维中的应用
java·flink·kafka·工业物联网·设备故障预测·智能运维·实时流处理
孟意昶21 小时前
Spark专题-第三部分:性能监控与实战优化(3)-数据倾斜优化
大数据·分布式·sql·spark
Lansonli21 小时前
大数据Spark(六十六):Transformation转换算子sample、sortBy和sortByKey
大数据·分布式·spark
iHero21 小时前
【Jitsi Meet】阿里云Docker安装Jitsi Meet后的调整
阿里云·docker·云计算
java_logo1 天前
2025 最新 Docker 镜像源加速列表与使用指南(10月更新)
运维·docker·容器
数智顾问1 天前
探索 Docker/K8s 部署 MySQL 的创新实践与优化技巧——高可用与性能调优进阶
docker
程序_白白1 天前
介绍一下什么是RabbitMQ的发送者可靠性?
分布式·rabbitmq·ruby
荣光波比1 天前
Docker(五)—— Docker Compose 一键搭建 LNMP 架构并部署 WordPress
运维·docker·容器·云计算