Docker快速部署Kafka(内网通用版本)

第一步:创建数据目录

复制代码
sudo mkdir -p /app/kafka/certs
sudo mkdir -p /app/kafka/data
sudo chmod -R 777 /app/kafka

第二步:生成服务端证书

  1. 创建 CA(根证书):

    Bash

    复制代码
    cd /app/kafka/certs
    
    openssl req -new -x509 -nodes -days 3650 \
      -subj "/CN=localhost" \
      -keyout server.key -out server.crt
    
    cat server.key server.crt > server.pem

Spring Boot 客户端配置

在你的本地开发项目中,修改 application.yml。由于我们使用的是自签名证书,需要关闭域名校验。
YAML

复制代码
   spring:
     kafka:
       bootstrap-servers: <你的公网IP>:9094
       properties:
         security.protocol: SSL
         ssl.truststore.type: PEM
         # 注意:如果是在本地 Windows 开发,这里可以写文件绝对路径
         ssl.truststore.location: src/main/resources/kafka/server.crt 
         # 必须加上这一行,否则自签名证书会因为域名不匹配报错
         ssl.endpoint.identification.algorithm: ""


第三步:准备 Docker 挂载目录

将生成的 kafka.server.keystore.jks 和 kafka.server.truststore.jks 放到服务器的一个目录下,例如 /opt/kafka/certs。


第四步:修改 Docker Run 命令

在双监听器基础上,加入 SSL 相关的配置项。注意 EXTERNAL 监听器的协议要改为 SSL。

复制代码
docker run -d \
  --name kafka-server \
  --restart always \
  -p 9092:9092 \
  -p 9094:9094 \
  -v /app/kafka/certs:/opt/kafka/config/certs \
  -v /app/kafka/data:/var/lib/kafka/data \
  -e KAFKA_NODE_ID=0 \
  -e KAFKA_PROCESS_ROLES=broker,controller \
  -e KAFKA_CONTROLLER_QUORUM_VOTERS=0@localhost:9093 \
  -e KAFKA_CONTROLLER_LISTENER_NAMES=CONTROLLER \
  -e KAFKA_LISTENER_SECURITY_PROTOCOL_MAP=INTERNAL:PLAINTEXT,EXTERNAL:SSL,CONTROLLER:PLAINTEXT \
  -e KAFKA_LISTENERS=INTERNAL://0.0.0.0:9092,EXTERNAL://0.0.0.0:9094,CONTROLLER://0.0.0.0:9093 \
  -e KAFKA_ADVERTISED_LISTENERS=INTERNAL://<内网IP>:9092,EXTERNAL://<外网IP>:9094 \
  -e KAFKA_INTER_BROKER_LISTENER_NAME=INTERNAL \
  -e KAFKA_SSL_KEYSTORE_TYPE=PEM \
  -e KAFKA_SSL_KEYSTORE_LOCATION=/opt/kafka/config/certs/server.pem \
  -e KAFKA_SSL_TRUSTSTORE_TYPE=PEM \
  -e KAFKA_SSL_TRUSTSTORE_LOCATION=/opt/kafka/config/certs/server.crt \
  -e KAFKA_SSL_CLIENT_AUTH=none \
  -e KAFKA_LOG_RETENTION_MS=86400000 \
  -e KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR=1 \
  --log-opt max-size=1g \
  --log-opt max-file=2 \
  apache/kafka:3.8.1
相关推荐
无人生还别怕1 天前
如何搭建k8s服务(containerd部署)
linux·云原生·容器·kubernetes·openanolisos
杨浦老苏1 天前
把项目管理搬回自己服务器:Windshift部署与避坑
docker·项目管理·群晖
木雷坞1 天前
Baserow Docker部署:导入设备借用CSV,再用表单新增登记
运维·docker·容器
fb_123451 天前
从探针到权限:一篇吃透 Kubernetes 健康检查、RBAC 认证授权与 Dashboard 可视化管理
云原生·容器·kubernetes
wefg11 天前
【Docker】基本指令
运维·docker·容器
mengge.cloud1 天前
10-28-Kubernetes健康检查认证授权与Dashboard
云原生·容器·kubernetes
牛马工作号1 天前
Copyparty 轻量文件共享:Docker Compose 部署、权限与多协议使用全指南
运维·docker·容器
oioihoii1 天前
Windows部署MySpeed自建测速服务:Docker运行后直接测速,再配置固定公网地址远程查看
运维·docker·容器
starzy19901 天前
Kafka网络层第一道门:Acceptor线程是怎么启动的
大数据·kafka
huaweichenai1 天前
spring boot对接kafka实现消息队列处理
spring boot·后端·kafka