Docker快速部署Kafka(内网通用版本)

第一步:创建数据目录

复制代码
sudo mkdir -p /app/kafka/certs
sudo mkdir -p /app/kafka/data
sudo chmod -R 777 /app/kafka

第二步:生成服务端证书

  1. 创建 CA(根证书):

    Bash

    复制代码
    cd /app/kafka/certs
    
    openssl req -new -x509 -nodes -days 3650 \
      -subj "/CN=localhost" \
      -keyout server.key -out server.crt
    
    cat server.key server.crt > server.pem

Spring Boot 客户端配置

在你的本地开发项目中,修改 application.yml。由于我们使用的是自签名证书,需要关闭域名校验。
YAML

复制代码
   spring:
     kafka:
       bootstrap-servers: <你的公网IP>:9094
       properties:
         security.protocol: SSL
         ssl.truststore.type: PEM
         # 注意:如果是在本地 Windows 开发,这里可以写文件绝对路径
         ssl.truststore.location: src/main/resources/kafka/server.crt 
         # 必须加上这一行,否则自签名证书会因为域名不匹配报错
         ssl.endpoint.identification.algorithm: ""


第三步:准备 Docker 挂载目录

将生成的 kafka.server.keystore.jks 和 kafka.server.truststore.jks 放到服务器的一个目录下,例如 /opt/kafka/certs。


第四步:修改 Docker Run 命令

在双监听器基础上,加入 SSL 相关的配置项。注意 EXTERNAL 监听器的协议要改为 SSL。

复制代码
docker run -d \
  --name kafka-server \
  --restart always \
  -p 9092:9092 \
  -p 9094:9094 \
  -v /app/kafka/certs:/opt/kafka/config/certs \
  -v /app/kafka/data:/var/lib/kafka/data \
  -e KAFKA_NODE_ID=0 \
  -e KAFKA_PROCESS_ROLES=broker,controller \
  -e KAFKA_CONTROLLER_QUORUM_VOTERS=0@localhost:9093 \
  -e KAFKA_CONTROLLER_LISTENER_NAMES=CONTROLLER \
  -e KAFKA_LISTENER_SECURITY_PROTOCOL_MAP=INTERNAL:PLAINTEXT,EXTERNAL:SSL,CONTROLLER:PLAINTEXT \
  -e KAFKA_LISTENERS=INTERNAL://0.0.0.0:9092,EXTERNAL://0.0.0.0:9094,CONTROLLER://0.0.0.0:9093 \
  -e KAFKA_ADVERTISED_LISTENERS=INTERNAL://<内网IP>:9092,EXTERNAL://<外网IP>:9094 \
  -e KAFKA_INTER_BROKER_LISTENER_NAME=INTERNAL \
  -e KAFKA_SSL_KEYSTORE_TYPE=PEM \
  -e KAFKA_SSL_KEYSTORE_LOCATION=/opt/kafka/config/certs/server.pem \
  -e KAFKA_SSL_TRUSTSTORE_TYPE=PEM \
  -e KAFKA_SSL_TRUSTSTORE_LOCATION=/opt/kafka/config/certs/server.crt \
  -e KAFKA_SSL_CLIENT_AUTH=none \
  -e KAFKA_LOG_RETENTION_MS=86400000 \
  -e KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR=1 \
  --log-opt max-size=1g \
  --log-opt max-file=2 \
  apache/kafka:3.8.1
相关推荐
csdn_aspnet13 小时前
在 Docker 容器中本地运行 SQL Server
运维·docker·容器·sqlserver
java资料站17 小时前
MongoDB 3节点副本集( Docker )
mongodb·docker·eureka
星落梦生21 小时前
Docker学习(11)
学习·docker·容器
万里侯1 天前
日志聚类之后别把 noise 扔掉:降噪应该改变视图,不抹掉证据
人工智能·微服务·ai·容器·k8s
byte轻骑兵2 天前
如何为你的 Web 应用添加文档编辑能力:ONLYOFFICE 文档集成实战
docker·私有化部署·系统集成·在线协作·wsl2·onlyoffice docs
用户3610588626122 天前
Kafka源码深度剖析:KafkaProducer最终如何处理响应
kafka
好用斋2 天前
内网测速 LibreSpeed:网页版 Docker 测速服务
运维·docker·容器
菜地里的小菜鸟2 天前
Docker 19.03.8 升级到 20.10.24
docker·云原生·容器·docker19038升级到201024
A-刘晨阳3 天前
K8S 二进制集群搭建(一主两从)v1.37.2 版本
运维·云原生·容器·kubernetes·calico·nerdctl
goehou3 天前
Kafka 的默认配置适合演示,不适合生产
kafka·消息队列·幂等·ai agent