分布式协调服务:ZooKeeper入门指南

什么是ZooKeeper?

ZooKeeper是一个开源的分布式协调服务,由Apache维护。它主要用于解决分布式系统中的数据一致性问题,提供诸如统一命名服务、状态同步服务、集群管理、分布式应用配置管理等功能

ZooKeeper的核心功能

集群角色

  • Leader:负责处理写请求,确保事务顺序性。
  • Follower:提供读服务,参与Leader选举和写操作的"过半写成功"策略。
  • Observer:提供读服务,不参与Leader选举,提升集群性能

数据模型

ZooKeeper的数据模型是一棵树形结构,每个节点称为ZNode,可以存储少量数据(不超过1MB)。ZNode分为永久节点和临时节点,临时节点与客户端会话相关

Watcher机制

客户端可以在ZNode上注册Watcher,当ZNode发生变化时,ZooKeeper会通知客户端

ZooKeeper的应用场景

集群管理

实时监控集群状态,根据状态变化进行调整

分布式锁

确保不同进程之间争夺资源时的互斥访问

Master选举

在多个节点中选举出一个主节点,避免单点故障。

配置管理

在分布式环境下同步配置文件

案例:HBase中的Master选举

HBase使用ZooKeeper实现Master选举,以避免单点故障。

工作原理

  1. 初始化:HBase集群启动时,多个HMaster节点尝试连接ZooKeeper。
  2. 选举:ZooKeeper通过临时节点机制,确保只有一个HMaster节点成功创建临时节点,从而成为主节点。
  3. 监控:其他HMaster节点监听ZooKeeper上的临时节点,当主节点故障时,临时节点消失,其他节点竞争成为新的主节点。
  4. 切换:当新的主节点选举成功后,ZooKeeper通知所有RegionServer更新主节点信息,确保集群正常运行。

这种机制确保了HBase集群的高可用性,即使主节点故障,也能快速切换到备用节点。

示例代码:创建ZNode

以下是使用Java客户端创建ZNode的示例代码:

java 复制代码
import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooDefs;
import org.apache.zookeeper.ZooKeeper;

public class CreateZNode {
    public static void main(String[] args) throws Exception {
        // 创建ZooKeeper客户端
        ZooKeeper zk = new ZooKeeper("localhost:2181", 1000, null);
        
        // 创建永久节点
        String path = "/app";
        byte[] data = "Hello, ZooKeeper!".getBytes();
        zk.create(path, data, ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
        
        // 关闭客户端
        zk.close();
    }
}

这个例子演示了如何使用ZooKeeper的Java客户端创建一个永久节点。

相关推荐
江城开朗的豌豆8 分钟前
JavaScript篇:字母侦探:如何快速统计字符串里谁才是'主角'?
前端·javascript·面试
江梦寻11 分钟前
MacOS下Homebrew国内镜像加速指南(2025最新国内镜像加速)
开发语言·后端·python·macos·架构·策略模式
风象南18 分钟前
SpringBoot的4种死信队列处理方式
java·spring boot·后端
互联网全栈架构1 小时前
遨游Spring AI:第一盘菜Hello World
java·人工智能·后端·spring
coderSong25687 小时前
Java高级 |【实验八】springboot 使用Websocket
java·spring boot·后端·websocket
Mr_Air_Boy8 小时前
SpringBoot使用dynamic配置多数据源时使用@Transactional事务在非primary的数据源上遇到的问题
java·spring boot·后端
咖啡啡不加糖9 小时前
Redis大key产生、排查与优化实践
java·数据库·redis·后端·缓存
大鸡腿同学9 小时前
纳瓦尔宝典
后端
Morpheon9 小时前
Cursor 1.0 版本 GitHub MCP 全面指南:从安装到工作流增强
ide·github·cursor·mcp