负载均衡之一致性哈希算法详解

负载均衡之一致性哈希算法详解

传统的哈希是直接把数据映射到对应的hash表上,但是当我们的数据量很大的时候,我们会采用多个hash节点来存储的方式来减少存储压力。

但是这种hash算法下,如果我们的节点发生了增加或减少的时候,我们就需要将所有数据,重新建立映射关系,这会导致大量的数据迁移和重新映射的问题。

而一致性hash算法就可以优化这些问题。

首先,一致性hash算法是将所有的数据全部映射到一个大小为0-2的32次方-1的环中(hash环存储)

然后,我们可以将我们服务的地址,映射到这个环上。

此时,当我们的数据来了以后,我们还是先将key通过hash计算放到我们的环上,然后我们看key沿顺时针 遇到的第一个节点,我们就将其放入该节点。

节点如果宕机了,可以zookeeper可以利用心跳检测功能,判断服务是否断开,从而移除相关节点,在zookeeper中移除后,我们需要在我们的hash环中也移除节点,假设我们移除了节点1,那么此时,我们只需要对一个数据进行重新映射即可。

同理添加节点也很方便,我们可以在node3和node1之间新增一个节点4,这样只会影响node3和node1这个区间的数据。

相关推荐
百度智能云技术站12 小时前
多模态模型训练加速,LoongForge 的 DP 负载均衡优化方案详解
负载均衡·dp·多模态大模型
Donk_671 天前
HAProxy实验搭建
运维·负载均衡
yyyyy_abc1 天前
负载均衡与高可用
运维·负载均衡
华万通信king3 天前
腾讯云CLB负载均衡接入实战:高并发Web服务的稳定性配置
前端·负载均衡·腾讯云
文青小兵4 天前
云计算Linux——负载均衡 (十四)
linux·运维·服务器·nginx·云计算·负载均衡
面向Google编程4 天前
从零学习Kafka:消费者组重平衡
大数据·kafka·负载均衡
原来是不二啊4 天前
f5学习笔记
负载均衡·f5
环流_5 天前
nacos:负载均衡 3大核心操作
运维·nacos·负载均衡
TDengine (老段)6 天前
TDengine VNode 生命周期 — 从创建到销毁的完整旅程
大数据·数据库·重构·系统架构·负载均衡·tdengine·涛思数据
切糕师学AI6 天前
gRPC 负载均衡详解:从原理到最佳实践
架构·负载均衡·grpc