Kafka可视化工具EFAK(Kafka-eagle)安装部署

Kafka Eagle是什么?

Kafka Eagle是一款用于监控和管理Apache Kafka的开源系统,它提供了完善的管理页面,例如Broker详情、性能指标趋势、Topic集合、消费者信息等。

源代码地址:https://github.com/smartloli/kafka-eagle

前置条件:

先安装kafka服务端并完成zookeeper、kafka的启动工作

先安装mysql数据库服务器,并分配好端口、账号、密码

准备安装包

下载JDK,下载链接:Java Downloads | Oracle 中国https://www.oracle.com/cn/java/technologies/downloads/#java8 下载EFAK,下载链接:EFAKhttps://www.kafka-eagle.org/

解压 JDK

上传jdk安装包 jdk-8u441-linux-x64.tar.gz 至服务器 /opt 目录下

执行 tar -xvf jdk-8u441-linux-x64.tar.gz 解压,解压后的目录为 jdk1.8.0_441

解压 EFAK

上传EFAK 安装包 kafka-eagle-bin-3.0.1.tar.gz 至服务器 /root 目录下

执行 tar -zxvf kafka-eagle-bin-3.0.1.tar.gz 解压 ,解压后的目录为 kafka-eagle-bin-3.0.1

cd kafka-eagle-bin-3.0.1 进入目录,里面还有一个tar.gz压缩包 efak-web-3.0.1-bin.tar.gz

执行 tar -xvf efak-web-3.0.1-bin.tar.gz 再解压,解压后的目录为 efak-web-3.0.1

配置JDK环境变量、EFAK环境变量

执行 vi /etc/profile 编辑,添加以下配置:

#增加EFAK的环境变量KE_HOME,指向efak的安装目录

export KE_HOME=/root/kafka-eagle-bin-3.0.1/efak-web-3.0.1

#增加JDK的环境变量JAVA_HOME,指向JDK的安装目录

export JAVA_HOME=/opt/jdk1.8.0_441

export JRE_HOME=$JAVA_HOME/jre

export CLASSPATH=JAVA_HOME/lib:JRE_HOME/lib:$CLASSPATH

#将JAVA_HOME和KE_HOME添加到环境

export PATH=PATH:JAVA_HOME/bin:JRE_HOME/bin:KE_HOME/bin:$PATH

保存编辑,然后执行 source /etc/profile 刷新环境信息

修改EFAK配置

执行 cd ${KE_HOME}/conf 进入efak 配置文件目录

执行 vi system-config.properties 修改配置文件

将配置文件中以下信息进行替换

复制代码
efak.zk.cluster.alias=cluster1,cluster2
cluster1.zk.list=tdn1:2181,tdn2:2181,tdn3:2181
cluster2.zk.list=xdn1:2181,xdn2:2181,xdn3:2181

替换成自己服务器的zookeeper集群配置(示例只配置一台zookeeper节点)

efak.zk.cluster.alias=cluster1

cluster1.zk.list=localhost:2181

修改mysql数据库配置,将以下的数据库链接信息改成你自己安装的mysql数据库信息

启动EFAK

cd ${KE_HOME}/bin

./ke.sh start

至此配置、启动EFAK完成,使用http://IP:8048端口即可访问EFAK的web界面

使用账号 admin 密码 123456 进行登录

异常记录:

请勿使用 yum install jdk 安装的目录,其中不包含efak所需的一些文件,会导致如下异常信息

/usr/lib/jvm/jre-openjdk/bin/jar: No such file or directory

相关推荐
云游1 小时前
利用外部Postgresql及zookeeper,启动Apache Dolphinscheduler3.1.9
分布式·postgresql·zookeeper·apache·工作流任务调度
Haoea!3 小时前
Flink-05学习 接上节,将FlinkJedisPoolConfig 从Kafka写入Redis
学习·flink·kafka
搬砖天才、4 小时前
kafka集群安装
分布式·kafka
电商数据girl5 小时前
有哪些常用的自动化工具可以帮助处理电商API接口返回的异常数据?【知识分享】
大数据·分布式·爬虫·python·系统架构
即将雄起的运维玩家7 小时前
kafka-kraft+SASL版本升级3.7.0-->3.9.1
分布式·kafka
上上迁7 小时前
分布式接口幂等性的演进和最佳实践,含springBoot 实现(Java版本)
java·spring boot·分布式
找不到、了9 小时前
分布式理论:CAP、Base理论
java·分布式
Code季风9 小时前
微服务分布式配置中心:Gin Web 服务层与 gRPC 服务层集成 Nacos 实战
分布式·微服务·rpc·架构·go·gin·consul
王小王-12311 小时前
基于Hadoop的用户购物行为可视化分析系统设计与实现
大数据·hadoop·分布式·用户购物行为·电商日志分析
sql2008help11 小时前
5-Kafka-replication(副本机制)概念
分布式·kafka