Kafka集群和kafka-manager安装

Kafka集群和kafka-manager安装

MacBook Linux安装zookeeper

MacBook Linux安装Kafka

kafka-manager安装

shell 复制代码
curl https://bintray.com/sbt/rpm/rpm | sudo tee /etc/yum.repos.d/bintray-sbt-rpm.repo

yum install -y sbt 

mkdir ~/.sbt 

vim ~/.sbt/repositories   
[repositories]
#local
public: http://maven.aliyun.com/nexus/content/groups/public/
typesafe:http://dl.bintray.com/typesafe/ivy-releases/ , [organization]/[module]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext], bootOnly
ivy-sbt-plugin:http://dl.bintray.com/sbt/sbt-plugin-releases/, [organization]/[module]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext]
sonatype-oss-releases

sonatype-oss-snapshots


wget https://github.com/yahoo/kafka-manager/archive/1.3.3.18.zip
unzip 1.3.3.18.zip

#wget https://github.com/yahoo/kafka-manager/archive/1.3.3.18.tar.gz
#tar -zxvf 1.3.3.18.tar.gz

rm 1.3.3.18.zip
/data/apps/kafka-manager-1.3.3.18
./sbt clean dist

Kafka集群

Kafka集群依赖zookeeper集群

Zookeeper集群部署和单机部署

shell 复制代码
第一台
broker.id=1
listeners=PLAINTEXT://10.2.45.3:9092
log.dirs=/data/xinyun/datas/kafka-logs
zookeeper.connect=10.2.45.3:2181,10.2.45.4:2181,10.2.45.5:2181

第二台
broker.id=2
listeners=PLAINTEXT://10.2.45.4:9092
log.dirs=/data/xinyun/datas/kafka-logs
zookeeper.connect=10.2.45.3:2181,10.2.45.4:2181,10.2.45.5:2181

第三台
broker.id=3
listeners=PLAINTEXT://10.2.45.5:9092
log.dirs=/data/xinyun/datas/kafka-logs
zookeeper.connect=10.2.45.3:2181,10.2.45.4:2181,10.2.45.5:2181
相关推荐
JHC00000016 小时前
基于 DrissionPage 与 Xvfb 的分布式无头爬虫架构
分布式·kafka
java1234_小锋2 天前
【免费】基于Spark实时医疗健康数据监测与疾病预测系统(Java版本+可视化大屏+Kafka+SpringBoot+Vue3) 锋哥原创出品,必属精品
大数据·spark·kafka·实时医疗健康数据监测·实时疾病预测系统
菜地里的小菜鸟2 天前
k8s部署单节点 Kafka(KRaft 模式)并启用 SASL 认证
kafka·kraft·k8s部署单节点kafkakraft模式·k8s部署kafka
Volunteer Technology3 天前
Kafka的消费全流程
分布式·kafka·linq
篮框坏了3 天前
Kafka 消费者卡死排查:一个 topic 堵了 18 小时,监控全绿没人发现
kafka
放学-别走3 天前
flink和kafka常见面试题
大数据·flink·kafka
java1234_小锋4 天前
【免费】基于Spark实时交通流量分析与拥堵预测系统(Java版本+可视化大屏+Kafka+SpringBoot+Vue3) 锋哥原创出品,必属精品
java·大数据·spark·kafka·实时交通流量分析与拥堵预测
敲个大西瓜4 天前
Kafka一百道核心面试题
kafka
后端观测站4 天前
第三篇:消息队列如何保证消息可靠性?
kafka·java-rocketmq
布鲁飞丝5 天前
kafka 副本集设置和理解
分布式·kafka