【大数据学习 | Zookeeper】Zookeeper服务端与客户端的工作流程

1. Zookeeper服务端

ZooKeeper 服务端通常是以集群的形式部署,这样可以提供高可用性和容错能力。ZooKeeper 集群中的每个节点都保存着几乎相同的数据副本(除了领导者选举相关的数据)。集群中有一个节点被选为领导者(Leader),其余的作为跟随者(Follower)领导者负责处理所有的写请求并通过一致性协议(如ZAB协议)确保数据的一致性;跟随者则处理读请求,并且从领导者那里同步最新的数据状态。

2. Zookeeper客户端

ZooKeeper 客户端连接到 ZooKeeper 集群中的任意一个服务器 。客户端可以选择监听特定的ZNode(ZooKeeper中的数据节点)或者路径下的变化。当客户端监听的ZNode发生改变时 (比如数据更新、子节点创建或删除等),ZooKeeper 会通知客户端这些变化。

2.1 工作流程

  1. 配置信息存储:应用程序可以将配置信息存储在 ZooKeeper 的 ZNodes 中。这些配置信息可以是简单的键值对,也可以是更复杂的结构。

  2. 客户端连接与监听:客户端应用启动后,首先连接到 ZooKeeper 集群。然后,客户端可以设置监听器(Watchers)来监听感兴趣的 ZNodes一旦设置了监听,客户端就会收到所关注 ZNode 的任何变化的通知。

  3. 数据变更通知:当 ZooKeeper 集群中的数据发生变化时(例如,管理员更新了某个配置项),所有设置了相关监听的客户端都会收到通知。客户端可以根据这些通知采取相应的动作,比如重新加载配置文件。

  4. 故障恢复:如果 ZooKeeper 集群中的某台服务器出现故障,客户端会自动尝试连接到集群中的其他服务器。由于数据是复制的,所以即使有服务器宕机,客户端仍然可以从其他服务器获取最新的配置信息。

3. 小结

ZooKeeper 服务端负责管理和维护配置信息,并确保这些信息在整个集群中是一致的。而 ZooKeeper 客户端则通过监听机制实时获取这些配置的变化,从而使得分布式系统能够动态地响应配置更新。这种模式非常适合需要快速适应环境变化的大规模分布式系统。

相关推荐
SelectDB10 小时前
秒级弹性、最高降本 70%:SelectDB Serverless 如何重塑云数仓资源效率
大数据·后端·云原生
WhoAmI10 小时前
MapReduce框架原理解析一:InputFormat
大数据·hadoop
WhoAmI10 小时前
MapReduce框架原理解析三:OutputFormat
大数据·hadoop
WhoAmI10 小时前
MapReduce框架原理解析二:Shuffle
大数据·hadoop
疯狂SQL18 小时前
手写高性能在线 JSON 工具|Web Worker 工程化打包 + 语法自动修复 + 多语言代码生成实战
typescript·json·next.js·web worker·前端性能优化·esbuild·源码实战
大大大大晴天1 天前
Hudi技术内幕:Key Generation原理与实践
大数据
zzzzzz3102 天前
9K Star 炸裂开源!这个 C 语言写的代码知识图谱,把 Linux 内核索引压缩到了 3 分钟
linux·服务器·sql
云技纵横4 天前
唯一索引 INSERT 死锁实战:5 秒复现交叉插入的 S 锁循环等待
sql·mysql
得物技术5 天前
从埋点需求到规则资产:Hermes Agent 重构得物数仓工作流
大数据·llm·ai编程
久美子5 天前
AI驱动数仓建设的Harness工程实践——本体建模、知识分层与上下文工程
大数据