分布式协调服务:ZooKeeper入门指南

什么是ZooKeeper?

ZooKeeper是一个开源的分布式协调服务,由Apache维护。它主要用于解决分布式系统中的数据一致性问题,提供诸如统一命名服务、状态同步服务、集群管理、分布式应用配置管理等功能

ZooKeeper的核心功能

集群角色

  • Leader:负责处理写请求,确保事务顺序性。
  • Follower:提供读服务,参与Leader选举和写操作的"过半写成功"策略。
  • Observer:提供读服务,不参与Leader选举,提升集群性能

数据模型

ZooKeeper的数据模型是一棵树形结构,每个节点称为ZNode,可以存储少量数据(不超过1MB)。ZNode分为永久节点和临时节点,临时节点与客户端会话相关

Watcher机制

客户端可以在ZNode上注册Watcher,当ZNode发生变化时,ZooKeeper会通知客户端

ZooKeeper的应用场景

集群管理

实时监控集群状态,根据状态变化进行调整

分布式锁

确保不同进程之间争夺资源时的互斥访问

Master选举

在多个节点中选举出一个主节点,避免单点故障。

配置管理

在分布式环境下同步配置文件

案例:HBase中的Master选举

HBase使用ZooKeeper实现Master选举,以避免单点故障。

工作原理

  1. 初始化:HBase集群启动时,多个HMaster节点尝试连接ZooKeeper。
  2. 选举:ZooKeeper通过临时节点机制,确保只有一个HMaster节点成功创建临时节点,从而成为主节点。
  3. 监控:其他HMaster节点监听ZooKeeper上的临时节点,当主节点故障时,临时节点消失,其他节点竞争成为新的主节点。
  4. 切换:当新的主节点选举成功后,ZooKeeper通知所有RegionServer更新主节点信息,确保集群正常运行。

这种机制确保了HBase集群的高可用性,即使主节点故障,也能快速切换到备用节点。

示例代码:创建ZNode

以下是使用Java客户端创建ZNode的示例代码:

java 复制代码
import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooDefs;
import org.apache.zookeeper.ZooKeeper;

public class CreateZNode {
    public static void main(String[] args) throws Exception {
        // 创建ZooKeeper客户端
        ZooKeeper zk = new ZooKeeper("localhost:2181", 1000, null);
        
        // 创建永久节点
        String path = "/app";
        byte[] data = "Hello, ZooKeeper!".getBytes();
        zk.create(path, data, ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
        
        // 关闭客户端
        zk.close();
    }
}

这个例子演示了如何使用ZooKeeper的Java客户端创建一个永久节点。

相关推荐
上进小菜猪2 分钟前
基于 YOLOv8 的昆虫智能识别工程实践 [目标检测完整源码]
后端
superman超哥9 分钟前
Rust 异步递归的解决方案
开发语言·后端·rust·编程语言·rust异步递归
CC码码16 分钟前
不修改DOM的高亮黑科技,你可能还不知道
前端·javascript·面试
散峰而望33 分钟前
【算法竞赛】栈和 stack
开发语言·数据结构·c++·算法·leetcode·github·推荐算法
猫头虎1 小时前
2026最新|GitHub 启用双因素身份验证 2FA 教程:TOTP.app 一键生成动态验证码(新手小白图文实操)
git·开源·gitlab·github·开源软件·开源协议·gitcode
开心就好20251 小时前
iOS Crash日志全面解析:结构、类型与分析方法
后端
毕设源码-钟学长1 小时前
【开题答辩全过程】以 基于Spring Boot的社区养老服务管理系统的设计与实现为例,包含答辩的问题和答案
java·spring boot·后端
nbsaas-boot1 小时前
slice / map 在 Go GC 与内存碎片上的真实成本
开发语言·后端·golang
数据小馒头1 小时前
拒绝循环写库:MySQL 批量插入、Upsert 与跨表更新的高效写法
后端
子洋1 小时前
基于远程开发的大型前端项目实践
运维·前端·后端