zookeeper多主机集群搭建

1. 准备工作

  • 安装Java:ZooKeeper需要Java环境,确保Java版本符合要求(一般使用JDK 8或以上)。
  • 下载ZooKeeper :从Apache ZooKeeper官网下载最新的稳定版本。
  • 服务器准备:准备至少三台服务器以保证集群的高可用性(奇数台服务器有助于选举机制)。
javascript 复制代码
//如果没有java,下载java
yum install java-1.8.0-openjdk-devel -y
//验证java
java -version
//从zookeeper下载tar包导入主机,也可以直接通过以下命令下载
cd /
wget wget https://dlcdn.apache.org/zookeeper/zookeeper-3.8.4/apache-zookeeper-3.8.4-bin.tar.gz
tar -xf apache-zookeeper-3.8.4-bin.tar.gz
mv apache-zookeeper-3.8.4-bin.tar.gz zookeeper

2. 配置ZooKeeper

在每台服务器上进行以下配置:

  1. 配置zoo.cfg前准备 : 在ZooKeeper解压目录的conf文件夹中,复制zoo_sample.cfg并重命名为zoo.cfg,并创建data目录

    bash 复制代码
    cd /zookeeper
    cp conf/zoo_sample.cfg conf/zoo.cfg
    mkdir data
  2. 编辑zoo.cfg : 打开conf/zoo.cfg文件并进行如下修改:

    bash 复制代码
    tickTime=2000 #ZooKeeper中使用的基本时间单位,单位为毫秒。
    initLimit=10 #ZooKeeper允许从服务器在启动时(与主服务器同步)花费的最大时间,单位为tickTime的倍数。
    syncLimit=5 #ZooKeeper允许从服务器与主服务器之间保持同步的最大时间,单位为tickTime的倍数。
    dataDir=/zookeeper/data #存储快照数据的目录,集群模式下每台服务器都要有一个独立的目录。
    clientPort=2181 #客户端连接ZooKeeper服务器的端口号。
    
    #集群服务器配置,格式为:server.X=hostname:peer_port:election_port。
    server.1=192.168.1.101:2888:3888 
    server.2=192.168.1.102:2888:3888 
    server.3=192.168.1.103:2888:3888
  3. 配置myid文件 : 在每台服务器的dataDir目录下创建一个myid文件,其中包含该服务器的编号(与zoo.cfg中的server.X一致)。例如:

    bash 复制代码
    echo "1" > /var/zookeeper/myid # 在192.168.1.101机器上 
    echo "2" > /var/zookeeper/myid # 在192.168.1.102机器上 
    echo "3" > /var/zookeeper/myid # 在192.168.1.103机器上

3. 启动ZooKeeper集群

  1. 启动ZooKeeper: 在每台服务器上进入ZooKeeper的解压目录并启动:

    bash 复制代码
    bin/zkServer.sh start
  2. 检查状态: 通过以下命令检查每台ZooKeeper节点的状态:

    bash 复制代码
    bin/zkServer.sh status

    输出信息中可以看到是leaderfollower

4. 验证集群

查看所有端口是否正常监听,在每台主机执行如下命令

bash 复制代码
lsof -i :2888
lsof -i :3888

正常打印端口监听信息则证明没问题。

5. 常见问题排查

  • 节点无法启动 :检查myid文件和zoo.cfg配置文件的正确性。
  • 集群选举失败:确保所有节点的时钟同步,并检查网络连通性,防火墙是否关闭。
相关推荐
sbjdhjd23 分钟前
04(上)| k8s中的微服务
微服务·云原生·kubernetes·开源·云计算·excel·kubelet
水木流年追梦34 分钟前
大模型入门-大模型优化方法13- MTP 多 token 输出、DCA 双块注意力
人工智能·分布式·算法·正则表达式·prompt
Francek Chen2 小时前
【大数据处理与分析】MapReduce:05 MapReduce的具体应用
大数据·hadoop·分布式·mapreduce
我是一颗柠檬3 小时前
【Java项目技术亮点】分布式锁实现与优化:从Redisson到ZooKeeper,彻底搞懂分布式锁的底层原理
java·redis·分布式·中间件·java-zookeeper
这个DBA有点耶3 小时前
时序数据库深度对比:2026 年主流 TSDB 架构演进与选型指南
数据库·sql·云原生·架构·运维开发·时序数据库
小哈里4 小时前
【K8S】OCI标准下的企业级镜像治理:Harbor+Skopeo+Trivy 最佳实践
云原生·容器·kubernetes·harbor·镜像·skopen
花间相见4 小时前
【Kubernetes02】—— 使用 kubeadm 从零搭建 K8s 集群(实操避坑版)
云原生·容器·kubernetes
moonsims4 小时前
基于Lattice Mesh的AI 的分布式共识与动态任务分配架构的无人机群“去中心化无声协同”技术和极低带宽下的韧性通信技术
人工智能·分布式·架构
张小凡vip4 小时前
Kubernetes--secret的简介和使用
云原生·容器·kubernetes
一个骇客5 小时前
批处理模型详解:从 MapReduce 到数据流引擎
分布式·架构