kafka-web管理工具cmak

一. 背景:

日常运维工作中,采用cli的方式进行kafka集群的管理,还是比较繁琐的(指令复杂?)。为方便管理,可以选择一些开源的webui工具。 推荐使用cmak。

二. 关于cmak:

cmak是 Yahoo 贡献的一款强大的 Apache Kafka 集群管理工具。主要有以下特点:

  1. 多集群管理:能在一个界面中轻松管理多个 Kafka 集群,方便用户在不同集群间进行切换和配置,实现统一管理。

  2. 集群状态检查:可提供详细的集群信息,涵盖主题、消费者、偏移量、代理服务器、副本分布、分区分发等,帮助管理员全面了解集群运行状况。

  3. 复制集选举:支持运行首选副本选举,优化数据分布,提升集群的数据可靠性和读取性能。

  4. 分区重分配:能自动生成分区任务,并根据需要执行分区重新分配,均衡集群负载,提高资源利用率。

  5. 主题操作:允许创建、删除主题,并可更新主题的相关配置,同时支持不同版本的 Kafka,满足多样化的主题管理需求。

  6. JMX 监控:可选启用 JMX 监控功能,收集并展示节点级别和主题级别的指标,为管理员提供更详细的性能数据。

三. 部署安装:

版本: CMAK-3.0.0.6

  1. 安装依赖工具:

    必须要jdk11
    yum install java-11-openjdk
    yum install java-11-openjdk-devel

  2. 安装cmak:

    wget https://github.com/yahoo/CMAK/archive/refs/tags/3.0.0.6.zip
    unzip 3.0.0.6.zip
    cd CMAK-3.0.0.6/
    PATH=/usr/lib/jvm/java-11-openjdk-11.0.19.0.7-1.el7_9.x86_64/bin:$PATH
    JAVA_HOME=/usr/lib/jvm/java-11-openjdk-11.0.19.0.7-1.el7_9.x86_64

  3. 编辑配置文件:

    ./sbt -java-home /usr/lib/jvm/java-11-openjdk-11.0.19.0.7-1.el7_9.x86_64 clean dist

    会在target/universal/下生成一个zip包。 移动出来即可:
    mv target/universal/cmak-3.0.0.6.zip /opt/
    cd /opt/ && unzip cmak-3.0.0.6.zip
    cd cmak-3.0.0.6
    vim conf/application.conf (修改为自己的zk地址)

    #启动:
    ./bin/cmak

  4. 访问验证:


深耕运维行业多年,擅长linux、容器云原生、运维自动化等方面。

欢迎沟通交流!

(V: xiaoxiangbj2013 ) !

相关推荐
Thomas.Sir3 天前
第21课:PyTorch|GPU多卡训练与分布式训练基础【让多卡并行成为你的加速引擎】
人工智能·pytorch·分布式
Cicada1283 天前
库存消息消费的正确性设计——从幂等窗口到批量流水线
分布式·系统架构
Nano叶落3 天前
Kafka 消费积压排查入门:Docker 搭环境亲手制造一次 ‘消息堵死‘,10 分钟看懂 Lag
kafka
Francek Chen4 天前
【大数据处理与分析】数据仓库Hive:04 数据仓库Hive概述
大数据·数据仓库·hive·hadoop·分布式
Gl�ria4 天前
Hadoop/YARN 集群缩容:下线DN节点
大数据·hadoop·分布式
吉甫作诵4 天前
Kafka 集群安装与运维实战:消费组排查、Offset 重置与副本重分配
大数据·运维·分布式·kafka·消息队列
imDwAaY4 天前
消息队列四大核心问题:顺序性、幂等性、可靠性与一致性
学习·kafka·rabbitmq
wno7044 天前
Spring Boot整合Kafka
spring boot·kafka
是Dream呀5 天前
Harness 工程:让 Agent 真正把任务做完
人工智能·分布式·缓存·agent