Zookeeper系列(一)集群搭建(非容器)

系列文章

Zookeeper系列(一)集群搭建(非容器)

目录

前言

下载

搭建

Data目录
Conf目录
集群复制和修改
启动

配置示例

测试

总结


前言

Zookeeper是一个开源的分布式协调服务,其设计目标是将那些复杂的且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一些简单的接口提供给用户使用。ZooKeeper 背后的动机是减轻分布式应用程序从头开始实现协调服务的责任。

Zookeeper是一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据订阅/发布、负载均衡、命名服务、集群管理、分布式锁和分布式队列等功能。

下载

从官网 Apache ZooKeeper 下载相应版本,这里版本为 3.7.2(本系列后续所用版本也是)。

搭建

Data目录

  • 首先创建集群项目存放的位置,当前是 /home/zookeeper/file ,这里可自定义

    mkdir -p /home/zookeeper/file

  • 将下载的压缩包上传到linux服务器,路径 /home/zookeeper/file 下,然后解压(通过wget和其他方式亦可)

    tar -zxvf apache-zookeeper-3.7.2-bin.tar.gz -C zookeeper-3.7.2

  • 复制一份作为 zookeeper1

    cp -r zookeeper-3.7.2 zookeeper1

  • 切换到 zookeeper1 目录下,创建 data 和 logs 目录

    cd zookeeper1
    mkdir data
    mkdir logs

  • 进入 data 目录,生成一个内容为 1 的 myid

    cd data
    vim myid

Conf目录

  • 接下来,操作配置相关内容,进入 conf 中,路径为 /home/zookeeper/file/zookeeper1/conf

    cd /home/zookeeper/file/zookeeper1/conf

  • 复制一份 zoo_sample.cfg 为 zoo.cfg

    cp zoo_sample.cfg zoo.cfg

  • 编辑 zoo.cfg,修改 dataDir 和 添加 server.服务器ID 列表

    dataDir=/home/zookeeper/file/zookeeper1/data
    server.1=192.168.119.142:2881:3881
    server.2=192.168.119.142:2882:3882
    server.3=192.168.119.142:2883:3883

注意:dataDir 为当前节点的 data 目录路径,这里为 zookeeper1节点的

server.服务器ID有几个配置几个(这里为3个),配置表达式如下:

server.服务器ID=服务器IP地址:服务器之间通信端⼝:服务器之间投票选举端⼝

集群复制和修改

  • 复制 zookeeper1,分别命名为 zookeeper2,zookeeper3(3个节点构成的集群)

    cp -r zookeeper1 zookeeper2
    cp -r zookeeper1 zookeeper3

  • 分别进入 zookeeper2 和 zookeeper3 下的 data 目录,分别修改 myid 的内容为 2 和 3(注意节点和值的对应)

  • 接下来就是 conf 的修改,进入 zookeeper2 下的 conf 目录,修改 zoo.cfg 的 dataDir 和 clientPort

    dataDir=/home/zookeeper/file/zookeeper2/data
    clientPort=2182

  • 进入 zookeeper3 下的 conf 目录,修改 zoo.cfg 的 dataDir 和 clientPort

    dataDir=/home/zookeeper/file/zookeeper3/data
    clientPort=2183

  • 以上就配置完成了,就可以启动了

启动

  • 分别进入zookeeper1、zookeeper2 和 zookeeper3 的 bin 目录,执行命令
bash 复制代码
 ./zkServer.sh start
  • 启动后,显示
  • 查看状态和是否主节点
bash 复制代码
./zkServer.sh status
  • 关闭
bash 复制代码
./zkServer.sh stop

配置示例

选择 zookeeper3 的 zoo.cfg 配置给列位参照(不同版本可能不同)

  • zoo.cfg
bash 复制代码
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/zookeeper/file/zookeeper3/data
# the port at which the clients will connect
clientPort=2183
server.1=192.168.119.142:2881:3881
server.2=192.168.119.142:2882:3882
server.3=192.168.119.142:2883:3883
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

## Metrics Providers
#
# https://prometheus.io Metrics Exporter
#metricsProvider.className=org.apache.zookeeper.metrics.prometheus.PrometheusMetricsProvider
#metricsProvider.httpPort=7000
#metricsProvider.exportJvmInfo=true

测试

启动全部节点后,可通过多种方式确认集群的可用性,这里选择客户端工具

  • 通过客户端工具,分别连接 zookeeper1 、zookeeper2 和 zookeeper3
  • 在 zookeeper1 下新增持久节点 test
  • 分别查看 zookeeper2 和 zookeeper3 对应的节点树数据情况,显示节点已同步
  • 然后在 zookeeper3 修改 test 的内容为 node3
  • 分别查看 zookeeper1 和 zookeeper2 的 test节点内容,显示节点内容已更新
  • 经过以上步骤,可初步确认集群是成功启动的

总结

Zookeeper是一个强大的分布式协调工具,接下来会持续更新Zookeeper的其他内容,包括但不限于分布式锁、分布式队列、源码分析等等。

相关推荐
苏苏大大3 小时前
zookeeper
java·分布式·zookeeper·云原生
费曼乐园15 小时前
Zookeeper启动指定JDK版本
zookeeper
费曼乐园1 天前
Kafka与ZooKeeper
zookeeper·kafka
ShareBeHappy_Qin1 天前
ZooKeeper 中的 ZAB 一致性协议与 Zookeeper 设计目的、使用场景、相关概念(数据模型、myid、事务 ID、版本、监听器、ACL、角色)
分布式·zookeeper·云原生
黄名富4 天前
Kafka 日志存储 — 文件目录及日志格式
java·分布式·微服务·zookeeper·kafka
guihong0045 天前
ZooKeeper 核心概念与机制深度解析
分布式·zookeeper·云原生
命运之手5 天前
[ Spring ] Install ZooKeeper on Ubuntu24
spring·zookeeper·ubuntu24
VX_CXsjNo15 天前
免费送源码:Java+SpringBoot+MySQL SpringBoot网上宠物领养管理系统 计算机毕业设计原创定制
java·hadoop·spring boot·mysql·zookeeper·flask·pytest
guihong0046 天前
ZooKeeper 常见问题与核心机制解析
linux·zookeeper·debian