Kafka单节点部署

  1. 配置JAVA环境变量

    tar xf jdk-8u202-linux-x64.tar.gz mv jdk1.8.0_202 /usr/local/java
    vim /etc/profile export JAVA_HOME=/usr/local/java export JRE_HOME=JAVA_HOME/jre
    export CLASSPATH=.:JAVA_HOME/lib/dt.jar:JAVA_HOME/lib/tools.jar:JRE_HOME/lib export PATH=JAVA_HOME/bin:PATH source /etc/profile

  2. 解压kafka安装包

    wget https://downloads.apache.org/kafka/3.4.1/kafka_2.13-3.4.1.tgz tar xf kafka_2.13-3.4.1.tgz
    $ mv kafka_2.13-3.4.1 /data/kafka

  3. 修改zk配置

    $ vim /data/kafka/config/zookeeper.properties
    dataDir=/data/kafka/zookeeper
    clientPort=2181
    maxClientCnxns=0
    admin.enableServer=false

  4. 修改kafka配置

    $ vim /data/kafka/config/server.properties
    broker.id=0
    listeners=PLAINTEXT://192.168.0.218:9092
    log.dirs=/data/kafka/kafka-logs
    zookeeper.connect=192.168.0.218:2181

  5. zk托管到systemd

    $ vim /usr/lib/systemd/system/zookeeper.service
    [Unit]
    Description=Apache Zookeeper service
    Requires=network.target
    After=network.target

    [Service]
    Type=forking
    Environment=JAVA_HOME=/usr/local/java
    ExecStart=/data/kafka/bin/zookeeper-server-start.sh -daemon /data/kafka/config/zookeeper.properties
    ExecStop=/data/kafka/bin/zookeeper-server-stop.sh
    Restart=on-failure
    RestartSec=10s

    [Install]
    WantedBy=multi-user.target

  6. kafka托管到systemd

    $ vim /usr/lib/systemd/system/kafka.service
    [Unit]
    Description=Apache Kafka server
    Documentation=http://kafka.apache.org/documentation.html
    Requires=network.target remote-fs.target
    After=network.target remote-fs.target zookeeper.service

    [Service]
    Type=forking
    Environment=JAVA_HOME=/usr/local/java
    ExecStart=/data/kafka/bin/kafka-server-start.sh -daemon /data/kafka/config/server.properties
    ExecStop=/data/kafka/bin/kafka-server-stop.sh
    Restart=on-failure
    RestartSec=10s

    [Install]
    WantedBy=multi-user.target

  7. 重载systemd配置并启动服务

    systemctl daemon-reload systemctl start zookeeper
    $ systemctl start kafka

相关推荐
RobinXYuan1 小时前
【Kafka 源码手记】02 Kafka 的核心哲学:Everything Is A Log
kafka·源码阅读
Sayai4 小时前
Kafka 2.8→3.9.1 跨大版本升级实战:ZooKeeper 同步升级、数据目录迁移与回滚预案全流程
大数据·运维·分布式·zookeeper·kafka
guo_wen_qiang2 天前
kafka重复消费
分布式·kafka
ClouGence3 天前
开源数据库管理工具 CloudDM 4.4.0 发布,新增 Kafka、SAP HANA 数据源
数据库·kafka
RobinXYuan3 天前
【Kafka 源码手记】01 从消息队列到 Event Streaming
kafka·源码阅读
nvd114 天前
深入剖析:GCP Pub/Sub 与 Apache Kafka 对消息处理延迟与消费者卡死的处理机制异同
分布式·kafka·apache
笔墨登场说说5 天前
centos 8 使用 kafka_2.13-4.3.1.tgz 安装kafka
linux·kafka·centos
guo_wen_qiang5 天前
kafka一直restarting,报错InconsistentClusterIdException
分布式·kafka
今年下半年5 天前
【消息队列】Spring Boot 集成 Kafka 消息队列:确保消费完成(手动提交偏移量+幂等判断+失败重试机制)
spring boot·kafka·幂等·失败重试
此时不提桶,更待何时6 天前
06-14-A-Kafka集群运维与迁移实战详解
运维·kafka