分布式协调服务:ZooKeeper入门指南

什么是ZooKeeper?

ZooKeeper是一个开源的分布式协调服务,由Apache维护。它主要用于解决分布式系统中的数据一致性问题,提供诸如统一命名服务、状态同步服务、集群管理、分布式应用配置管理等功能

ZooKeeper的核心功能

集群角色

  • Leader:负责处理写请求,确保事务顺序性。
  • Follower:提供读服务,参与Leader选举和写操作的"过半写成功"策略。
  • Observer:提供读服务,不参与Leader选举,提升集群性能

数据模型

ZooKeeper的数据模型是一棵树形结构,每个节点称为ZNode,可以存储少量数据(不超过1MB)。ZNode分为永久节点和临时节点,临时节点与客户端会话相关

Watcher机制

客户端可以在ZNode上注册Watcher,当ZNode发生变化时,ZooKeeper会通知客户端

ZooKeeper的应用场景

集群管理

实时监控集群状态,根据状态变化进行调整

分布式锁

确保不同进程之间争夺资源时的互斥访问

Master选举

在多个节点中选举出一个主节点,避免单点故障。

配置管理

在分布式环境下同步配置文件

案例:HBase中的Master选举

HBase使用ZooKeeper实现Master选举,以避免单点故障。

工作原理

  1. 初始化:HBase集群启动时,多个HMaster节点尝试连接ZooKeeper。
  2. 选举:ZooKeeper通过临时节点机制,确保只有一个HMaster节点成功创建临时节点,从而成为主节点。
  3. 监控:其他HMaster节点监听ZooKeeper上的临时节点,当主节点故障时,临时节点消失,其他节点竞争成为新的主节点。
  4. 切换:当新的主节点选举成功后,ZooKeeper通知所有RegionServer更新主节点信息,确保集群正常运行。

这种机制确保了HBase集群的高可用性,即使主节点故障,也能快速切换到备用节点。

示例代码:创建ZNode

以下是使用Java客户端创建ZNode的示例代码:

java 复制代码
import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooDefs;
import org.apache.zookeeper.ZooKeeper;

public class CreateZNode {
    public static void main(String[] args) throws Exception {
        // 创建ZooKeeper客户端
        ZooKeeper zk = new ZooKeeper("localhost:2181", 1000, null);
        
        // 创建永久节点
        String path = "/app";
        byte[] data = "Hello, ZooKeeper!".getBytes();
        zk.create(path, data, ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
        
        // 关闭客户端
        zk.close();
    }
}

这个例子演示了如何使用ZooKeeper的Java客户端创建一个永久节点。

相关推荐
蓝倾4 分钟前
1688平台根据关键词获取商品API接口操作指南
前端·后端·fastapi
蓝倾10 分钟前
京东商品评论API接口实战指南
前端·后端·fastapi
九旬20 分钟前
亲测有效!Cursor限制访问的破解方法,程序员必看!
前端·后端
雪荷24 分钟前
Spring AI 使用 Elasticsearch 作为向量数据库
后端
葡萄城技术团队33 分钟前
.NET SDK 9.0.200引入对SLNX解决方案文件的支持
后端
小马爱打代码42 分钟前
Spring Boot基于AOP的本地/远程调用动态路由实践
java·spring boot·后端
天天摸鱼的java工程师44 分钟前
用户在线时长怎么设计 —— 一个Java开发者的实战总结
java·后端·面试
undefinedType1 小时前
Elasticsearch 检索模型解析:BM25
后端
用户21411832636021 小时前
08-mcp-server案例分享-零代码挑战!用 RovoDev 一键生成 Mermaid 驱动的 MCP-Server
后端
_一条咸鱼_1 小时前
LangChain链的调试与故障排查深度解析(30)
人工智能·面试·langchain