Zookeeper系列(一)集群搭建(非容器)

系列文章

Zookeeper系列(一)集群搭建(非容器)

目录

前言

下载

搭建

Data目录
Conf目录
集群复制和修改
启动

配置示例

测试

总结


前言

Zookeeper是一个开源的分布式协调服务,其设计目标是将那些复杂的且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一些简单的接口提供给用户使用。ZooKeeper 背后的动机是减轻分布式应用程序从头开始实现协调服务的责任。

Zookeeper是一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据订阅/发布、负载均衡、命名服务、集群管理、分布式锁和分布式队列等功能。

下载

从官网 Apache ZooKeeper 下载相应版本,这里版本为 3.7.2(本系列后续所用版本也是)。

搭建

Data目录

  • 首先创建集群项目存放的位置,当前是 /home/zookeeper/file ,这里可自定义

    mkdir -p /home/zookeeper/file

  • 将下载的压缩包上传到linux服务器,路径 /home/zookeeper/file 下,然后解压(通过wget和其他方式亦可)

    tar -zxvf apache-zookeeper-3.7.2-bin.tar.gz -C zookeeper-3.7.2

  • 复制一份作为 zookeeper1

    cp -r zookeeper-3.7.2 zookeeper1

  • 切换到 zookeeper1 目录下,创建 data 和 logs 目录

    cd zookeeper1
    mkdir data
    mkdir logs

  • 进入 data 目录,生成一个内容为 1 的 myid

    cd data
    vim myid

Conf目录

  • 接下来,操作配置相关内容,进入 conf 中,路径为 /home/zookeeper/file/zookeeper1/conf

    cd /home/zookeeper/file/zookeeper1/conf

  • 复制一份 zoo_sample.cfg 为 zoo.cfg

    cp zoo_sample.cfg zoo.cfg

  • 编辑 zoo.cfg,修改 dataDir 和 添加 server.服务器ID 列表

    dataDir=/home/zookeeper/file/zookeeper1/data
    server.1=192.168.119.142:2881:3881
    server.2=192.168.119.142:2882:3882
    server.3=192.168.119.142:2883:3883

注意:dataDir 为当前节点的 data 目录路径,这里为 zookeeper1节点的

server.服务器ID有几个配置几个(这里为3个),配置表达式如下:

server.服务器ID=服务器IP地址:服务器之间通信端⼝:服务器之间投票选举端⼝

集群复制和修改

  • 复制 zookeeper1,分别命名为 zookeeper2,zookeeper3(3个节点构成的集群)

    cp -r zookeeper1 zookeeper2
    cp -r zookeeper1 zookeeper3

  • 分别进入 zookeeper2 和 zookeeper3 下的 data 目录,分别修改 myid 的内容为 2 和 3(注意节点和值的对应)

  • 接下来就是 conf 的修改,进入 zookeeper2 下的 conf 目录,修改 zoo.cfg 的 dataDir 和 clientPort

    dataDir=/home/zookeeper/file/zookeeper2/data
    clientPort=2182

  • 进入 zookeeper3 下的 conf 目录,修改 zoo.cfg 的 dataDir 和 clientPort

    dataDir=/home/zookeeper/file/zookeeper3/data
    clientPort=2183

  • 以上就配置完成了,就可以启动了

启动

  • 分别进入zookeeper1、zookeeper2 和 zookeeper3 的 bin 目录,执行命令
bash 复制代码
 ./zkServer.sh start
  • 启动后,显示
  • 查看状态和是否主节点
bash 复制代码
./zkServer.sh status
  • 关闭
bash 复制代码
./zkServer.sh stop

配置示例

选择 zookeeper3 的 zoo.cfg 配置给列位参照(不同版本可能不同)

  • zoo.cfg
bash 复制代码
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/zookeeper/file/zookeeper3/data
# the port at which the clients will connect
clientPort=2183
server.1=192.168.119.142:2881:3881
server.2=192.168.119.142:2882:3882
server.3=192.168.119.142:2883:3883
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

## Metrics Providers
#
# https://prometheus.io Metrics Exporter
#metricsProvider.className=org.apache.zookeeper.metrics.prometheus.PrometheusMetricsProvider
#metricsProvider.httpPort=7000
#metricsProvider.exportJvmInfo=true

测试

启动全部节点后,可通过多种方式确认集群的可用性,这里选择客户端工具

  • 通过客户端工具,分别连接 zookeeper1 、zookeeper2 和 zookeeper3
  • 在 zookeeper1 下新增持久节点 test
  • 分别查看 zookeeper2 和 zookeeper3 对应的节点树数据情况,显示节点已同步
  • 然后在 zookeeper3 修改 test 的内容为 node3
  • 分别查看 zookeeper1 和 zookeeper2 的 test节点内容,显示节点内容已更新
  • 经过以上步骤,可初步确认集群是成功启动的

总结

Zookeeper是一个强大的分布式协调工具,接下来会持续更新Zookeeper的其他内容,包括但不限于分布式锁、分布式队列、源码分析等等。

相关推荐
Lill_bin10 小时前
深入理解ElasticSearch集群:架构、高可用性与数据一致性
大数据·分布式·elasticsearch·搜索引擎·zookeeper·架构·全文检索
xcx00319 小时前
快充协议方案,Type-C接口受电端Sink取电快充协议芯片
zookeeper·rabbitmq·flume·memcached·storm
QDNBD20 小时前
【zookeeper安装】zookeeper安装详细教程(单机/集群部署)(linux版)
linux·zookeeper
二进制杯莫停1 天前
初识zookeeper
分布式·zookeeper·云原生
赵渝强老师1 天前
【赵渝强老师】基于ZooKeeper实现Hadoop HA
大数据·hadoop·分布式·zookeeper
兮动人2 天前
错误: 找不到或无法加载主类 org.apache.zookeeper.server.quorum.QuorumPeerMain
分布式·zookeeper·apache
星辰@Sea2 天前
ZooKeeper远程连接超时排查与解决
linux·分布式·zookeeper
Lill_bin2 天前
ElasticSearch底层原理解析
大数据·分布式·elasticsearch·搜索引擎·zookeeper·云原生·jenkins
编程经验分享3 天前
Windows 安装 ZooKeeper 以及 IDEA 安装 zoolytic 连接工具
分布式·zookeeper·云原生
ps酷教程3 天前
Zookeeper学习
分布式·学习·zookeeper