Docker快速部署Kafka(内网通用版本)

第一步:创建数据目录

复制代码
sudo mkdir -p /app/kafka/certs
sudo mkdir -p /app/kafka/data
sudo chmod -R 777 /app/kafka

第二步:生成服务端证书

  1. 创建 CA(根证书)

    Bash

    复制代码
    cd /app/kafka/certs
    
    openssl req -new -x509 -nodes -days 3650 \
      -subj "/CN=localhost" \
      -keyout server.key -out server.crt
    
    cat server.key server.crt > server.pem

Spring Boot 客户端配置

在你的本地开发项目中,修改 application.yml。由于我们使用的是自签名证书,需要关闭域名校验。
YAML

复制代码
   spring:
     kafka:
       bootstrap-servers: <你的公网IP>:9094
       properties:
         security.protocol: SSL
         ssl.truststore.type: PEM
         # 注意:如果是在本地 Windows 开发,这里可以写文件绝对路径
         ssl.truststore.location: src/main/resources/kafka/server.crt 
         # 必须加上这一行,否则自签名证书会因为域名不匹配报错
         ssl.endpoint.identification.algorithm: ""


第三步:准备 Docker 挂载目录

将生成的 kafka.server.keystore.jkskafka.server.truststore.jks 放到服务器的一个目录下,例如 /opt/kafka/certs


第四步:修改 Docker Run 命令

在双监听器基础上,加入 SSL 相关的配置项。注意 EXTERNAL 监听器的协议要改为 SSL

复制代码
docker run -d \
  --name kafka-server \
  --restart always \
  -p 9092:9092 \
  -p 9094:9094 \
  -v /app/kafka/certs:/opt/kafka/config/certs \
  -v /app/kafka/data:/var/lib/kafka/data \
  -e KAFKA_NODE_ID=0 \
  -e KAFKA_PROCESS_ROLES=broker,controller \
  -e KAFKA_CONTROLLER_QUORUM_VOTERS=0@localhost:9093 \
  -e KAFKA_CONTROLLER_LISTENER_NAMES=CONTROLLER \
  -e KAFKA_LISTENER_SECURITY_PROTOCOL_MAP=INTERNAL:PLAINTEXT,EXTERNAL:SSL,CONTROLLER:PLAINTEXT \
  -e KAFKA_LISTENERS=INTERNAL://0.0.0.0:9092,EXTERNAL://0.0.0.0:9094,CONTROLLER://0.0.0.0:9093 \
  -e KAFKA_ADVERTISED_LISTENERS=INTERNAL://<内网IP>:9092,EXTERNAL://<外网IP>:9094 \
  -e KAFKA_INTER_BROKER_LISTENER_NAME=INTERNAL \
  -e KAFKA_SSL_KEYSTORE_TYPE=PEM \
  -e KAFKA_SSL_KEYSTORE_LOCATION=/opt/kafka/config/certs/server.pem \
  -e KAFKA_SSL_TRUSTSTORE_TYPE=PEM \
  -e KAFKA_SSL_TRUSTSTORE_LOCATION=/opt/kafka/config/certs/server.crt \
  -e KAFKA_SSL_CLIENT_AUTH=none \
  -e KAFKA_LOG_RETENTION_MS=86400000 \
  -e KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR=1 \
  --log-opt max-size=1g \
  --log-opt max-file=2 \
  apache/kafka:3.8.1
相关推荐
杨浦老苏8 小时前
开源多用户图书追踪系统LibrisLog
docker·群晖·收藏管理
赵渝强老师9 小时前
【赵渝强老师】Kubernetes(K8s)中的金丝雀升级
linux·docker·云原生·容器·kubernetes
鹤落晴春9 小时前
【K8s】配置存储卷
云原生·容器·kubernetes
我叫张小白。11 小时前
CentOS 7 安装 Docker并配置镜像加速(完整指南)
linux·docker·centos
原来是猿12 小时前
Docker 【 技术架构(1)】
docker·容器·架构
ba_pi12 小时前
k8s删除pod
linux·容器·kubernetes
木雷坞13 小时前
Qdrant Docker 部署教程:数据卷、API Key 和集合初始化
运维·docker·容器·知识图谱
梦梦代码精13 小时前
为什么这个开源的AI平台会火?有点东西。。。
人工智能·算法·机器学习·docker·开源
Lv_沐曦13 小时前
银河麒麟桌面版安装、多屏配置、触摸校准
运维·docker·samba·vsftpd·银河麒麟·触控校准·多屏配置
浩风祭月15 小时前
一个开发者的“看门狗”:我把服务器监控从被动告警变成了主动预防
后端·docker