Kafka单节点部署

  1. 配置JAVA环境变量

    tar xf jdk-8u202-linux-x64.tar.gz mv jdk1.8.0_202 /usr/local/java
    vim /etc/profile export JAVA_HOME=/usr/local/java export JRE_HOME=JAVA_HOME/jre
    export CLASSPATH=.:JAVA_HOME/lib/dt.jar:JAVA_HOME/lib/tools.jar:JRE_HOME/lib export PATH=JAVA_HOME/bin:PATH source /etc/profile

  2. 解压kafka安装包

    wget https://downloads.apache.org/kafka/3.4.1/kafka_2.13-3.4.1.tgz tar xf kafka_2.13-3.4.1.tgz
    $ mv kafka_2.13-3.4.1 /data/kafka

  3. 修改zk配置

    $ vim /data/kafka/config/zookeeper.properties
    dataDir=/data/kafka/zookeeper
    clientPort=2181
    maxClientCnxns=0
    admin.enableServer=false

  4. 修改kafka配置

    $ vim /data/kafka/config/server.properties
    broker.id=0
    listeners=PLAINTEXT://192.168.0.218:9092
    log.dirs=/data/kafka/kafka-logs
    zookeeper.connect=192.168.0.218:2181

  5. zk托管到systemd

    $ vim /usr/lib/systemd/system/zookeeper.service
    [Unit]
    Description=Apache Zookeeper service
    Requires=network.target
    After=network.target

    [Service]
    Type=forking
    Environment=JAVA_HOME=/usr/local/java
    ExecStart=/data/kafka/bin/zookeeper-server-start.sh -daemon /data/kafka/config/zookeeper.properties
    ExecStop=/data/kafka/bin/zookeeper-server-stop.sh
    Restart=on-failure
    RestartSec=10s

    [Install]
    WantedBy=multi-user.target

  6. kafka托管到systemd

    $ vim /usr/lib/systemd/system/kafka.service
    [Unit]
    Description=Apache Kafka server
    Documentation=http://kafka.apache.org/documentation.html
    Requires=network.target remote-fs.target
    After=network.target remote-fs.target zookeeper.service

    [Service]
    Type=forking
    Environment=JAVA_HOME=/usr/local/java
    ExecStart=/data/kafka/bin/kafka-server-start.sh -daemon /data/kafka/config/server.properties
    ExecStop=/data/kafka/bin/kafka-server-stop.sh
    Restart=on-failure
    RestartSec=10s

    [Install]
    WantedBy=multi-user.target

  7. 重载systemd配置并启动服务

    systemctl daemon-reload systemctl start zookeeper
    $ systemctl start kafka

相关推荐
lakernote4 小时前
图解 Kafka Consumer 常用 API:poll、seek、pause、wakeup 到底在控制什么?
分布式·kafka·linq
lazy H7 小时前
不同的消息队列有什么区别?Kafka、RabbitMQ、RocketMQ、Pulsar、ActiveMQ 选型对比
后端·中间件·kafka·rabbitmq·rocketmq
hopsky9 小时前
kafka 对发送端的容错处理
数据库·分布式·kafka
Devin~Y1 天前
从内容社区到AI智能客服:Spring Boot + Spring Cloud + Spring AI 全栈实战面试拆解
java·spring boot·redis·elasticsearch·spring cloud·kafka·mybatis
DLYSB_3 天前
Kafka 消费倾斜死锁与 Partition 掉队:我用 Rust 写了个“数据管道物理哨兵”,比 Grafana 报警快了 18 秒
rust·kafka·grafana·报警灯
creator_Li3 天前
Kafka消费者offset提交
kafka
TDengine (老段)3 天前
TDengine 第三方工具 — Telegraf、Kafka Connect、Flink、Spark
大数据·数据库·物联网·flink·kafka·时序数据库·tdengine
apgk14 天前
基于Canal实现mysql数据同步到消息队列(RabbitMQ/Kafka)详细操作教程
docker·kafka·rabbitmq
liudashuang20174 天前
Kafka Producer 隐藏深坑:Sender 线程自阻塞(自死锁)导致 BufferExhaustedException 完整复盘
java·分布式·kafka·linq
小张同学a.4 天前
ELK企业级日志分析平台3——ES数据备份 & 集群监控 & ELFK+Kafka 架构部署
linux·运维·elk·elasticsearch·架构·kafka·filebeat