在上一篇博客,我们学习Redis
哨兵Sentinel
集群的搭建,redis
的哨兵模式提供了比如监控、自动故障转移等高可用方案,但是这种方案,容量相对固定,要进行持续扩容或者数据分片就不适合,所以有另外一种更复杂的集群方案,Cluster
集群模式
实验环境
- CentOS7
- Xshell6
- XFtp6
- Redis6.2.2
节点准备
Redis Cluster
集群模式至少需要三主三从,起码得6个节点,因为没有那么多服务器,所以先用3个节点来做实验,正常大型项目都是需要部署多几个节点,提供系统可用性。
- 节点1:192.168.65.109 6380
- 节点2:192.168.65.109 6381
- 节点3:192.168.66.108 6380
- 节点4:192.168.66.108 6381
- 节点5:192.168.66.149 6380
- 节点6:192.168.66.149 6381
每一个节点部署一个redis,可以配置好一个,然后统一上传即可
shell
# 到对应目录
cd /usr/local
# 创建一个目录
mkdir redis-cluster
# 复制redis-6.2.2安装目录
cp -r /usr/local/redis/redis-6.2.2 /usr/local/redis-cluster/redis-6.2.2-6380
修改配置
修改redis.conf
配置文件
shell
# 修改节点端口
port 6380
# 注释下面这一行
bind 127.0.0.1
# 保护模式改为no,允许外部网络访问
protected-mode no
# 设置后台运行,改为yes
daemonize yes
# 开启集群模式
cluster-enabled yes
# 集群配置文件,根据端口不同修改
cluster-config-file nodes-6380.conf
# pid文件路径配置
pidfile /var/run/redis-6380.pid
启动每个节点的redis
配置好之后,部署每个节点的redis
shell
# 到对应目录
cd /usr/local/redis-cluster/redis-6.2.2-6380/src
# 启动redis
./redis-server ../redis.conf
查看redis是否启动成功
shell
ps -elf | grep redis
或者查看端口
shell
netstat -lntp | grep 6380
创建Cluster集群
在任意一个节点创建集群
shell
./redis-cli --cluster create 192.168.65.109:6380 192.168.65.109:6381 192.168.66.108:6380 192.168.66.108:6381 192.168.66.149:6380 192.168.66.149:6381 --cluster-replicas 1
查看集群信息
shell
[root@localhst src]# redis-cli -p 6380
127.0.0.1:6380> cluster nodes
Cluster自动故障转移
现在模拟一些一个节点出现宕机的情况,192.168.65.109:6380
节点关闭,可以看到日志等一会后,原本是slave
节点的192.168.66.108:6381
节点升级为master
节点
重启一下刚才的192.168.65.109:6380
节点,可以看到变成slave
节点
所以,cluster集群是会进行自动故障转移的,还是比较高可用的
集群扩容
连接一个redis客户端,然后add-node
第一个参数是要添加的节点,第二个参数是集群里随机的节点
shell
./redis-cli -p 6380 --cluster add-node 192.168.65.109:6382 192.168.65.109:6380
看看节点是否添加成功
数据迁移
在上一个步骤,添加好节点后,可以看到节点,但是发现没有分配hash槽
所以,使用命令
shell
./redis-cli --cluster reshard 192.168.109.6382
- 要转移多少槽位的数据
How many slots do you want to move (from 1 to 16384)? 1-16384之间 - 输入接收节点id
What is the receiving node ID? baaf46e193307c6e59e125607c316f7742a8560c,从图可以看出6382的节点id - hash槽从哪里拿数据
假如可以输入192.168.65.109:6380的节点id:219616cbc6bc890cob8b215e4eoa136583f377aa 再后面输入done
,回车就会同步对应槽的数据,如果要所有节点,直接输入all即可
集群缩容
要移除节点,也就是集群缩容,可以使用命令移除节点,节点id在cluster nodes
查看
shell
./redis-cli --cluster del-node 192.168.65.109:6380 [节点id]
Cluster其它命令
详细的可以参考官方文档:https://redis.io/commands/?group=cluster
- 集群相关命令(需要进入客户端)
- cluster info :打印集群的信息
- cluster nodes :列出集群当前已知的所有节点,以及这些节点的
相关信息。 - cluster meet :将 ip 和 port 所指定的节点添加到集群当中。
- cluster forget <node_id> :从集群中移除 node_id 指定的节点
- cluster replicate <node_id> :将当前节点设置为 node_id 指定的节点的
从节点。 - cluster saveconfig :将节点的配置文件保存到硬盘里面。
- 槽slot命令
- cluster addslots [slot ...] :将一个或多个槽(slot)指派(assign)给当前
节点。 - cluster delslots [slot ...] :移除一个或多个槽对当前节点的指派。
- cluster flushslots :移除指派给当前节点的所有槽,让当前节点变成一个没有指派任何槽的节点。
- cluster setslot node <node_id> :将槽 slot 指派给 node_id 指定的节点,如果槽已经指派给另一个节点,那么先让另一个节点删除该槽>,然后再进行指派。
- cluster setslot migrating <node_id> :将本节点的槽 slot 迁移到 node_id指定的节点中。
- cluster setslot importing <node_id> :从 node_id 指定的节点中导入槽slot 到本节点。
- cluster setslot stable :取消对槽 slot 的导入(import)或者迁移(migrate)。
- cluster addslots [slot ...] :将一个或多个槽(slot)指派(assign)给当前
- 键命令
- cluster keyslot :计算键 key 应该被放置在哪个槽上。
- cluster countkeysinslot :返回槽 slot 目前包含的键值对数量。
- cluster getkeysinslot :返回 count 个 slot 槽中的键