Zookeeper系列(一)集群搭建(非容器)

系列文章

Zookeeper系列(一)集群搭建(非容器)

目录

前言

下载

搭建

Data目录
Conf目录
集群复制和修改
启动

配置示例

测试

总结


前言

Zookeeper是一个开源的分布式协调服务,其设计目标是将那些复杂的且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一些简单的接口提供给用户使用。ZooKeeper 背后的动机是减轻分布式应用程序从头开始实现协调服务的责任。

Zookeeper是一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据订阅/发布、负载均衡、命名服务、集群管理、分布式锁和分布式队列等功能。

下载

从官网 Apache ZooKeeper 下载相应版本,这里版本为 3.7.2(本系列后续所用版本也是)。

搭建

Data目录

  • 首先创建集群项目存放的位置,当前是 /home/zookeeper/file ,这里可自定义

    mkdir -p /home/zookeeper/file

  • 将下载的压缩包上传到linux服务器,路径 /home/zookeeper/file 下,然后解压(通过wget和其他方式亦可)

    tar -zxvf apache-zookeeper-3.7.2-bin.tar.gz -C zookeeper-3.7.2

  • 复制一份作为 zookeeper1

    cp -r zookeeper-3.7.2 zookeeper1

  • 切换到 zookeeper1 目录下,创建 data 和 logs 目录

    cd zookeeper1
    mkdir data
    mkdir logs

  • 进入 data 目录,生成一个内容为 1 的 myid

    cd data
    vim myid

Conf目录

  • 接下来,操作配置相关内容,进入 conf 中,路径为 /home/zookeeper/file/zookeeper1/conf

    cd /home/zookeeper/file/zookeeper1/conf

  • 复制一份 zoo_sample.cfg 为 zoo.cfg

    cp zoo_sample.cfg zoo.cfg

  • 编辑 zoo.cfg,修改 dataDir 和 添加 server.服务器ID 列表

    dataDir=/home/zookeeper/file/zookeeper1/data
    server.1=192.168.119.142:2881:3881
    server.2=192.168.119.142:2882:3882
    server.3=192.168.119.142:2883:3883

注意:dataDir 为当前节点的 data 目录路径,这里为 zookeeper1节点的

server.服务器ID有几个配置几个(这里为3个),配置表达式如下:

server.服务器ID=服务器IP地址:服务器之间通信端⼝:服务器之间投票选举端⼝

集群复制和修改

  • 复制 zookeeper1,分别命名为 zookeeper2,zookeeper3(3个节点构成的集群)

    cp -r zookeeper1 zookeeper2
    cp -r zookeeper1 zookeeper3

  • 分别进入 zookeeper2 和 zookeeper3 下的 data 目录,分别修改 myid 的内容为 2 和 3(注意节点和值的对应)

  • 接下来就是 conf 的修改,进入 zookeeper2 下的 conf 目录,修改 zoo.cfg 的 dataDir 和 clientPort

    dataDir=/home/zookeeper/file/zookeeper2/data
    clientPort=2182

  • 进入 zookeeper3 下的 conf 目录,修改 zoo.cfg 的 dataDir 和 clientPort

    dataDir=/home/zookeeper/file/zookeeper3/data
    clientPort=2183

  • 以上就配置完成了,就可以启动了

启动

  • 分别进入zookeeper1、zookeeper2 和 zookeeper3 的 bin 目录,执行命令
bash 复制代码
 ./zkServer.sh start
  • 启动后,显示
  • 查看状态和是否主节点
bash 复制代码
./zkServer.sh status
  • 关闭
bash 复制代码
./zkServer.sh stop

配置示例

选择 zookeeper3 的 zoo.cfg 配置给列位参照(不同版本可能不同)

  • zoo.cfg
bash 复制代码
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/zookeeper/file/zookeeper3/data
# the port at which the clients will connect
clientPort=2183
server.1=192.168.119.142:2881:3881
server.2=192.168.119.142:2882:3882
server.3=192.168.119.142:2883:3883
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

## Metrics Providers
#
# https://prometheus.io Metrics Exporter
#metricsProvider.className=org.apache.zookeeper.metrics.prometheus.PrometheusMetricsProvider
#metricsProvider.httpPort=7000
#metricsProvider.exportJvmInfo=true

测试

启动全部节点后,可通过多种方式确认集群的可用性,这里选择客户端工具

  • 通过客户端工具,分别连接 zookeeper1 、zookeeper2 和 zookeeper3
  • 在 zookeeper1 下新增持久节点 test
  • 分别查看 zookeeper2 和 zookeeper3 对应的节点树数据情况,显示节点已同步
  • 然后在 zookeeper3 修改 test 的内容为 node3
  • 分别查看 zookeeper1 和 zookeeper2 的 test节点内容,显示节点内容已更新
  • 经过以上步骤,可初步确认集群是成功启动的

总结

Zookeeper是一个强大的分布式协调工具,接下来会持续更新Zookeeper的其他内容,包括但不限于分布式锁、分布式队列、源码分析等等。

相关推荐
guihong0041 天前
深入解析Zookeeper脑裂问题与CAP取舍:从原理到实战
分布式·zookeeper·云原生
尚墨11112 天前
linux 安装启动zookeeper全过程及遇到的坑
linux·zookeeper
爬山算法2 天前
Zookeeper(58)如何在Zookeeper中实现分布式锁?
分布式·zookeeper·云原生
IT闫3 天前
【Dubbo+Zookeeper】——SpringBoot+Dubbo+Zookeeper知识整合
分布式·zookeeper·云原生·dubbo
赴前尘5 天前
Docker安装Kafka(不依赖ZooKeeper)
docker·zookeeper·kafka
master-dragon5 天前
zookeeper有序临时结点实现公平锁的实践例子
分布式·zookeeper·云原生
听封7 天前
Zookeeper 和 Redis 哪种更好?
redis·分布式·zookeeper
爬山算法9 天前
Zookeeper(47)如何在Zookeeper中设置节点数据?
分布式·zookeeper·云原生
linux开发之路9 天前
GitHub推荐C++项目:基于muduo、protobuf、zookeeper实现RPC框架
c++·zookeeper·github·protobuf·rpc框架
枫桥听月9 天前
2.zookeeper3.8.4安装
zookeeper