docker搭建kafka

1.拉取zookeeper镜像

注意:云服务器需要设置安全策略放行2181与9092端口,否则访问失败

java 复制代码
#默认拉取最新版本镜像
docker pull wurstmeister/zookeeper

#检查镜像是否拉取成功
docker images | grep zookeeper

2.通过docker运行zookeeper

javascript 复制代码
#docker容器单机启动
docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper

#检查zookeeper是否运行成功
docker ps | grep zookeeper

#若是服务异常,则查日志,最后100行
docker logs -f -t --tail 100 zookeeper

3.拉取kafka镜像

javascript 复制代码
#默认拉取最新版本
docker pull wurstmeister/kafka

#检查kafka是否拉取成功
docker images | grep kafka

4.通过docker运行kafka

javascript 复制代码
#单机启动
docker run -d --name kafka \
-p 9092:9092 \
-e KAFKA_BROKER_ID=0 \
-e KAFKA_ZOOKEEPER_CONNECT= X.X.X.X(本机ip地址):2181 \
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://X.X.X.X(本机ip地址):9092 \
-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 wurstmeister/kafka

#检查kafka是否运行成功
docker ps | grep kafka

#若是服务异常,则查日志,最后100行
docker logs -f -t --tail 100 kafka

#进入容器内部
docker exec -it kafka /bin/bash
cd opt/kafka/bin

#创建topic,测试使用
./kafka-topics.sh --create --zookeeper X.X.X.X(本机ip地址):2181 --replication-factor 1 --partitions 1 --topic kafka_test

#查看topic是否创建成功
./kafka-topics.sh --list --zookeeper X.X.X.X(本机ip地址):2181

#--新开一个窗口,运行生产者
./kafka-console-producer.sh --broker-list X.X.X.X(本机ip地址):9092 --topic kafka_test

#再新开窗口运行消费者,监控消费情况
./kafka-console-consumer.sh --bootstrap-server X.X.X.X(本机ip地址):9092 --topic kafka_test --from-beginning

其他命令:
#查看某个组的消费情况
./kafka-consumer-groups.sh --zookeeper X.X.X.X(本机ip地址):2181 --describe --group groupName

#查看目前所有的消费者组
./kafka-consumer-groups.sh --list --bootstrap-server X.X.X.X(本机ip地址):9092
相关推荐
武子康2 小时前
大数据-79 Kafka 监控从入门到实战:度量体系、JMX采集与可视化告警全流程 Prometheus、Kafka Eagle
大数据·后端·kafka
martian6654 小时前
大模型部署:AI大模型在医学影像分类中的ONNX、TensorRT和Docker应用
人工智能·docker·分类·ai大模型·hugging face
007php0077 小时前
使用 Docker、Jenkins、Harbor 和 GitLab 构建 CI/CD 流水线
数据库·ci/cd·docker·容器·golang·gitlab·jenkins
退役小学生呀11 小时前
十九、云原生分布式存储 CubeFS
分布式·docker·云原生·容器·kubernetes·k8s
smileNicky12 小时前
Kafka 为什么具有高吞吐量的特性?
分布式·kafka
deeper_wind15 小时前
k8s-容器化部署论坛和商城服务(小白的“升级打怪”成长之路)
linux·运维·容器·kubernetes
UtopianCoding15 小时前
MinerU:重新定义PDF智能提取的开源利器
docker·pdf·开源
wdxylb17 小时前
云原生俱乐部-k8s知识点归纳(8)
云原生·容器·kubernetes
007php00718 小时前
Jenkins+docker 微服务实现自动化部署安装和部署过程
运维·数据库·git·docker·微服务·自动化·jenkins
hello_ world.19 小时前
k8s笔记04-常用部署命令
笔记·容器·kubernetes