概述
Redis是基于内存的nosql数据库,数据一般是存储于内存中,想让内存数据保存到磁盘中,我们需要利用Redis的持久化机制。
Redis的持久化机制用于将内存中的数据保存到磁盘,以便在重启后恢复数据。
Redis 提供了两种主要的持久化方式:
- RDB(Redis Database)快照
- AOF(Append Only File)日志
在Redis4.0版本之后,引入了混合持久化(RDB + AOF)
RDB持久化方式讲解
RDB 持久化机制以轻量、快速为核心优势,适合对数据实时性要求不高但需要高效恢复的场景。在生产环境中,通常与 AOF 结合使用(混合持久化),以平衡数据安全性和性能。合理配置触发策略、监控文件生成状态,并做好备份管理,是确保 RDB 机制稳定运行的关键。
其使用场景通常为:
- 缓存场景:允许部分数据丢失(如缓存热点数据),优先使用 RDB 提升恢复速度。
- 定期全量备份:例如每天生成一次 RDB 文件,用于历史数据存档或容灾切换。
- 主从复制:Redis 主从集群中,主节点通过 RDB 向从节点同步初始数据(增量同步通过 AOF 实现)。
RDB实现原理
RDB 是 Redis 在某个时间点将数据写入一个临时文件(快照),持久化结束后,用这个临时文件替换之前的持久化文件,达到数据持久化的目的。
RDB触发持久化方式
手动触发
SAVE 命令:阻塞主线程,直到 RDB 文件生成完毕,期间无法处理客户端请求。
BGSAVE 命令: fork 出一个子进程来生成 RDB 文件,主线程继续处理请求,不阻塞。
自动触发
通过配置文件(redis.conf)中的 save 配置项,满足条件时自动执行 BGSAVE。
# 基础配置项
save 900 1 # 900秒内至少有1个键被修改,触发快照
save 300 10 # 300秒内至少有10个键被修改,触发快照
save 60 10000 # 60秒内至少有10000个键被修改,触发快照
# RDB 文件存储路径(建议使用独立磁盘,避免与系统盘混用)
dir /data/redis/rdb
# RDB 文件名(可包含日期戳,便于区分版本)
dbfilename "dump-${DATE}.rdb" # 需配合脚本动态生成,Redis 不支持变量直接替换
# 压缩配置(生产环境建议保持默认)
rdbcompression yes
# 校验配置(加载时校验 RDB 文件完整性,默认开启)
rdbchecksum yes
RDB文件管理
文件存储位置与命名
- 存储路径:由配置项 dir 决定,默认值为 /var/lib/redis(可通过 config get dir 查看)。
- 文件名:由配置项 dbfilename 决定,默认值为 dump.rdb(可通过 config get dbfilename 查看)。
压缩配置:
- RDB 文件默认使用 LZF 算法压缩,可通过配置项 rdbcompression yes|no 开启或关闭(默认 yes)。
- 关闭压缩可提升生成速度,但会增加文件体积,适用于 CPU 资源紧张的场景。
- 二进制格式:RDB 文件为二进制格式,不可直接读取,但体积小、恢复速度快。
RDB恢复方式及时机
-
当Redis宕机重启之后会自动加载rdb文件(如果同时开启了AOF,则优先加载AOF)。
-
如果想强制加载RDB,忽略AOF时,可在配置中设置 appendonly no,或在启动时指定 --loadrdb 参数。
-
手动加载指定加载RDB文件
--dbfilename:指定dump.rdb文件的路径
redis-server --dbfilename /path/dump.rdb
RDB实战
# 创建模拟数据
127.0.0.1:6379> set test1 1
OK
127.0.0.1:6379> set test2 2
OK
127.0.0.1:6379> set test3 3
OK
127.0.0.1:6379> keys *
1) "test1"
2) "test2"
3) "test3"
# 执行快照
127.0.0.1:6379> bgsave
Background saving started
[root@master /data00/data/redis]# ll
total 96
-rw-r--r-- 1 root root 125 May 29 19:28 dump.rdb
模拟一下将dump.rdb文件删除,重启之后数据还在吗?
[root@master /data00/data/redis]# mv dump.rdb ~
# 强制停止redis
[root@master ~]# ps -ef | grep redis
root 908803 635754 0 19:38 pts/0 00:00:00 grep redis
root 1818909 1 0 May20 ? 00:19:44 redis-server 0.0.0.0:6379
[root@master ~]# pkill redis-server
启动Redis服务
[root@master ~]# redis-server /data00/data/redis/redis.conf
[root@master ~]# ss -lntup | grep 6379
tcp LISTEN 0 511 0.0.0.0:6379 0.0.0.0:* users:(("redis-server",pid=1807376,fd=6))
检查数据是否存在
127.0.0.1:6379> keys *
(empty array)
模拟恢复dump.rdb文件
# 将dump.rdb文件迁移到Redis数据目录下
[root@master /data00/data/redis]# mv ~/dump.rdb /data00/data/redis
# 检查rdb文件是否损坏
[root@master /data00/data/redis]# redis-check-rdb dump.rdb
[offset 0] Checking RDB file dump.rdb
[offset 27] AUX FIELD redis-ver = '6.2.18'
[offset 41] AUX FIELD redis-bits = '64'
[offset 53] AUX FIELD ctime = '1748518107'
[offset 68] AUX FIELD used-mem = '875088'
[offset 84] AUX FIELD aof-preamble = '0'
[offset 86] Selecting DB ID 0
[offset 125] Checksum OK
[offset 125] \o/ RDB looks OK! \o/
[info] 3 keys read
[info] 0 expires
[info] 0 already expired
# 启动Redis并检查数据
[root@master ~]# redis-server /data00/data/redis/redis.conf
[root@master ~]# redis-cli
127.0.0.1:6379> auth !Xinxin123
OK
127.0.0.1:6379> keys *
1) "test2"
2) "test1"
3) "test3"
AOF持久化方式讲解
AOF(Append Only File)是 Redis 提供的一种实时性更强的持久化方式,通过记录所有写操作命令(而非数据本身)来保证数据的完整性。
核心原理
- 客户端发送写命令(如 SET key value)。
- Redis 执行命令并将结果返回客户端。
- 将命令写入 AOF 缓冲区(内存)。
- 根据配置策略将缓冲区内容同步到磁盘。
刷盘策略(appendfsync)
- always:每个写命令都同步到磁盘,最多会丢失一个命令
- everysec:每秒同步一次磁盘(默认配置),最多丢失 1 秒数据
- no:由操作系统决定何时刷盘(通常为 30 秒左右,取决于内核调度),可能会丢失大量数据
AOF相关配置
# 启用 AOF(默认关闭)
appendonly yes
# 刷盘策略(推荐 everysec,兼顾安全与性能)
appendfsync everysec
# AOF 文件名(默认 appendonly.aof)
appendfilename "appendonly.aof"
# AOF 文件存储目录(与 RDB 共享,由 dir 参数决定)
dir /var/lib/redis
# 开启混合持久化(Redis 4.0+ 支持)
aof-use-rdb-preamble yes
AOF重写机制
为什么需要重写?
随着写命令不断追加,AOF 文件会越来越大,可能导致:
- 文件体积膨胀:占用大量磁盘空间。
- 恢复速度变慢:重启时需要重放更多命令。
重写原理
通过 BGREWRITEAOF
命令触发,Redis 会:
- fork 子进程遍历当前内存数据。
- 生成最简命令集(如合并多个 SET 为一个)。
- 替换原有 AOF 文件,保证原子性。
自动触发重写
在 redis.conf 中配置:
# 当 AOF 文件比上次重写后增长超过 100% 时触发
auto-aof-rewrite-percentage 100
# AOF 文件至少达到 64MB 才触发重写(避免频繁重写小文件)
auto-aof-rewrite-min-size 64mb
AOF恢复机制
Redis 自动加载 AOF 日志
Redis 服务器启动时会优先尝试加载 AOF 文件来恢复数据,前提是满足以下条件:
1、配置文件中需启用 AOF 持久化,在 Redis 的配置文件(redis.conf)中,appendonly 参数需设置为 yes:
appendonly yes
2、存在有效的 AOF 文件,Redis 会检查 appendfilename 参数指定的 AOF 文件名(默认是 appendonly.aof)是否存在,且文件内容未损坏
混合持久化机制讲解
Redis的混合持久化机制(Hybrid Persistence)是Redis4.0版本及以上的新特性,混合持久化机制(Hybrid Persistence)是结合了 AOF(Append Only File)和 RDB(Redis Database)两种持久化方式优点的策略,旨在提供更高效的数据恢复能力和更细粒度的数据安全性。
工作原理
混合持久化机制的核心是:
在执行 AOF 重写(BGREWRITEAOF)时,将当前内存中的数据以 RDB 快照格式写入 AOF 文件,后续的写命令继续以 AOF 格式追加到文件末尾。
具体流程如下:
- 启用混合持久化:在 redis.conf 中配置 aof-use-rdb-preamble yes(默认关闭)。
- AOF 重写触发:当 AOF 文件达到一定大小或手动执行 BGREWRITEAOF 时,Redis 会:
- 生成 RDB 快照数据(二进制格式,紧凑高效)。
- 将 RDB 数据写入新 AOF 文件的开头。
- 继续将后续的写命令以文本协议格式追加到 AOF 文件末尾。
- 数据恢复:Redis 启动时,先加载 RDB 部分(快速恢复大部分数据),再执行 AOF 追加部分的命令(恢复最新操作)。
混合持久化相关配置
appendonly yes # 启用 AOF 持久化
aof-use-rdb-preamble yes # 启用混合持久化(Redis 4.0+ 支持)
# 触发AOF重写
auto-aof-rewrite-percentage 100 # AOF 文件大小比上次重写后增长 100% 时触发
auto-aof-rewrite-min-size 64mb # AOF 文件最小达到 64MB 时触发
数据恢复流程
当 Redis 服务器重启时,加载混合 AOF 文件的流程:
- 检查文件格式:识别 AOF 文件是否包含 RDB 前缀。
- 加载 RDB 部分:快速解析二进制 RDB 数据,重建内存状态。
- 执行 AOF 部分:继续执行 RDB 之后的 AOF 命令,恢复最新操作。
混合持久化 vs 纯 AOF vs 纯 RDB区别
特性 | 混合持久化 | 纯 AOF | 纯 RDB |
---|---|---|---|
数据恢复速度 | 快(RDB 加载 + 少量 AOF 命令) | 较慢(逐行执行命令) | 最快(直接加载快照) |
文件体积 | 小(RDB 二进制 + 增量 AOF) | 大(纯文本命令) | 中等(二进制快照) |
数据安全性 | 高(接近 AOF,仅丢失未同步数据) | 高(取决于 fsync 策略) | 低(可能丢失最后一次快照后的数据) |
写操作开销 | 中等(重写时生成 RDB) | 高(频繁 fsync) | 低(定期快照) |
兼容性 | Redis 4.0+ | 全版本支持 | 全版本支持 |