ZooKeeper集群环境搭建

🥇🥇【大数据学习记录篇】-持续更新中~🥇🥇


个人主页:beixi@

本文章收录于专栏(点击传送):【大数据学习】
💓💓持续更新中,感谢各位前辈朋友们支持学习~💓💓

文章目录

1.ZooKeeper集群环境介绍

ZooKeeper集群由多个服务器节点组成,其中包括一个Leader节点和多个Follower节点。Leader节点负责处理所有客户端请求,并将数据同步到Follower节点。当Leader节点出现故障时,Follower节点会通过选举机制选举出新的Leader节点。
ZooKeeper集群的主要特点包括:

  • 高性能:ZooKeeper采用基于内存的数据结构和高效的通信协议,具有很高的性能和低延迟。

  • 可靠性:ZooKeeper通过数据复制和选举机制来实现容错能力,即使部分节点出现故障,集群仍然可用。

  • 顺序一致性:ZooKeeper保证了客户端对数据的读写操作是按照其发送顺序被执行的。

  • 数据持久化:ZooKeeper可以将数据持久化到磁盘,即使集群重启也能恢复数据。

2.搭建环境准备

本次用到的环境有:
JDK1.8.0_144
Zookeeper3.4.6
Oracle Linux 7.4

3.搭建步骤

1.解压Zookeeper压缩文件至/opt目录。

bash 复制代码
tar -zxvf experiment/file/zookeeper-3.4.6.tar.gz -C /opt

2.修改解压后文件夹的名字为zookeeper。

bash 复制代码
mv /opt/zookeeper-3.4.6 /opt/zookeeper
ll /opt/

3.复制Zookeeper配置文件zoo_sample.cfg名为/zoo.cfg

bash 复制代码
cp -r /opt/zookeeper/conf/zoo_sample.cfg /opt/zookeeper/conf/zoo.cfg

4.编辑文件zoo.cfg

bash 复制代码
vim /opt/zookeeper/conf/zoo.cfg

5.按键:set nu回车设置行号,部分截图如下

6.按键12gg,光标定位到12行,部分截图如下

7.按键 i ,更改代码如下:

bash 复制代码
dataDir=/root/zookeeper/zkdata
dataLogDir=/root/zookeeper/zkdatalog
server.1=slave1:2888:3888
server.2=slave2:2888:3888
server.3=master:2888:3888

8.按键Esc,按键":wq!"保存退出。
9.建立Zookeeper数据文件夹zkdata和日志文件夹zkdatalog。

bash 复制代码
mkdir -p /root/zookeeper/zkdata
mkdir -p /root/zookeeper/zkdatalog

10.赋予文件夹zkdata和zkdatalog可读写权限。

bash 复制代码
chmod 700 /root/zookeeper/zkdata
chmod 700 /root/zookeeper/zkdatalog

11.查看文件夹zkdata和zkdatalog可读写权限。

bash 复制代码
ll /root/zookeeper

12.编辑.bashrc文件,配置Zookeeper环境变量。

bash 复制代码
vim ~/.bashrc

13.按键Shift+g键定位到最后一行,按键 i 切换到输入模式下,添加如下代码

bash 复制代码
export ZOOKEEPER_HOME=/opt/zookeeper
PATH=$PATH:$ZOOKEEPER_HOME/bin

14.按键Esc,按键":wq!"保存退出。
15.刷新配置文件,使新加Zookeeper环境变量生效。

bash 复制代码
source ~/.bashrc

16.拷贝master主机".bashrc"文件到slave1、slave2从机"~"下。

bash 复制代码
scp ~/.bashrc slave1:~/
scp ~/.bashrc slave2:~/

17.拷贝"/root/zookeeper"目录下zkdata和zkdatalog文件夹到slave1、slave2从机对应位置。

bash 复制代码
scp -r /root/zookeeper slave1:/root/
scp -r /root/zookeeper slave2:/root/


18.拷贝配置好的zookeeper文件夹到slave1、slave2从机"/opt"下。

bash 复制代码
scp -r /opt/zookeeper slave1:/opt
scp -r /opt/zookeeper slave2:/opt


19.在当前主节点master机上,将字符串"3"写入文件myid。

bash 复制代码
echo "3" > /root/zookeeper/zkdata/myid
bash 复制代码
cat /root/zookeeper/zkdata/myid

20.切换至"从节点1"机器,双击桌面"Xfce终端"图标打开命令窗口,将"1"写入myid文件。

bash 复制代码
echo "1" > /root/zookeeper/zkdata/myid
bash 复制代码
cat /root/zookeeper/zkdata/myid

21.在slave1机上,刷新配置文件,使新加Zookeeper环境变量生效。

bash 复制代码
source ~/.bashrc

22.切换至"从节点2"机器,双击桌面"Xfce终端"图标打开命令窗口,将"2"写入myid文件。

bash 复制代码
echo "2" > /root/zookeeper/zkdata/myid
bash 复制代码
cat /root/zookeeper/zkdata/myid

23.在slave2机上,刷新配置文件,使新加Zookeeper环境变量生效。

bash 复制代码
source ~/.bashrc

24.切换至"主节点",双击桌面"Xfce终端"图标打开命令窗口,启动Zookeeper。

bash 复制代码
zkServer.sh start

25.切换至"从节点1",双击桌面"Xfce终端"图标打开命令窗口,启动Zookeeper。

bash 复制代码
zkServer.sh start

26.切换至"从节点2",双击桌面"Xfce终端"图标打开命令窗口,启动Zookeeper。

bash 复制代码
zkServer.sh start

27.切换至"主节点",通过命令窗口,查看Zookeeper状态和守护进程。

bash 复制代码
zkServer.sh status
bash 复制代码
jps

28.切换至"从节点1",通过命令窗口,查看Zookeeper状态和守护进程。

bash 复制代码
zkServer.sh status
bash 复制代码
jps

29.切换至"从节点2",通过命令窗口,查看Zookeeper状态和守护进程。

bash 复制代码
zkServer.sh status
bash 复制代码
jps

30.切换至"主节点",双击桌面"Xfce终端"图标打开命令窗口,停止Zookeeper。

bash 复制代码
zkServer.sh stop

31.切换至"从节点1",双击桌面"Xfce终端"图标打开命令窗口,停止Zookeeper。

bash 复制代码
zkServer.sh stop

32.切换至"从节点2",双击桌面"Xfce终端"图标打开命令窗口,停止Zookeeper。

bash 复制代码
zkServer.sh stop

所有配置完成,如果本篇文章对你有帮助,记得点赞关注+收藏哦~

相关推荐
糖豆豆今天也要努力鸭25 分钟前
torch.__version__的torch版本和conda list的torch版本不一致
linux·pytorch·python·深度学习·conda·torch
烦躁的大鼻嘎33 分钟前
【Linux】深入理解GCC/G++编译流程及库文件管理
linux·运维·服务器
乐大师34 分钟前
Deepin登录后提示“解锁登陆密钥环里的密码不匹配”
运维·服务器
ac.char40 分钟前
在 Ubuntu 上安装 Yarn 环境
linux·运维·服务器·ubuntu
敲上瘾41 分钟前
操作系统的理解
linux·运维·服务器·c++·大模型·操作系统·aigc
processflow流程图1 小时前
分布式kettle调度平台v6.4.0新功能介绍
分布式
在下不上天1 小时前
Flume日志采集系统的部署,实现flume负载均衡,flume故障恢复
大数据·开发语言·python
全栈开发圈1 小时前
干货分享|分布式数据科学工具 Xorbits 的使用
分布式
长弓聊编程1 小时前
Linux系统使用valgrind分析C++程序内存资源使用情况
linux·c++
cherub.1 小时前
深入解析信号量:定义与环形队列生产消费模型剖析
linux·c++