Redis 持久化机制

概述

Redis 是基于内存的 nosql 数据库，数据一般是存储于内存中，想让内存数据保存到磁盘中，我们需要利用 Redis 的持久化机制。

Redis 的持久化机制用于将内存中的数据保存到磁盘，以便在重启后恢复数据。Redis 提供了两种主要的持久化方式：

• RDB（Redis Database）快照

• AOF（Append Only File）日志

在 Redis4.0 版本之后，引入了混合持久化（RDB + AOF）

RDB 持久化方式讲解

RDB 持久化机制以轻量、快速为核心优势，适合对数据实时性要求不高但需要高效恢复的场景。在生产环境中，通常与 AOF 结合使用（混合持久化），以平衡数据安全性和性能。合理配置触发策略、监控文件生成状态，并做好备份管理，是确保 RDB 机制稳定运行的关键。

其使用场景通常为：

• 缓存场景：允许部分数据丢失（如缓存热点数据），优先使用 RDB 提升恢复速度。

• 定期全量备份：例如每天生成一次 RDB 文件，用于历史数据存档或容灾切换。

• 主从复制：Redis 主从集群中，主节点通过 RDB 向从节点同步初始数据（增量同步通过 AOF 实现）。

RDB 实现原理

RDB 是 Redis 在某个时间点将数据写入一个临时文件（快照），持久化结束后，用这个临时文件替换之前的持久化文件，达到数据持久化的目的。

RDB 触发持久化方式

手动触发

SAVE 命令：阻塞主线程，直到 RDB 文件生成完毕，期间无法处理客户端请求。BGSAVE 命令： fork 出一个子进程来生成 RDB 文件，主线程继续处理请求，不阻塞。

自动触发

通过配置文件（redis.conf）中的 save 配置项，满足条件时自动执行 BGSAVE。

# 基础配置项save 900 1        # 900秒内至少有1个键被修改，触发快照save 300 10       # 300秒内至少有10个键被修改，触发快照save 60 10000     # 60秒内至少有10000个键被修改，触发快照 # RDB 文件存储路径（建议使用独立磁盘，避免与系统盘混用）dir /data/redis/rdb# RDB 文件名（可包含日期戳，便于区分版本）dbfilename "dump-${DATE}.rdb"  # 需配合脚本动态生成，Redis 不支持变量直接替换# 压缩配置（生产环境建议保持默认）rdbcompression yes# 校验配置（加载时校验 RDB 文件完整性，默认开启）rdbchecksum yes

RDB 文件管理

文件存储位置与命名

• 存储路径：由配置项 dir 决定，默认值为 /var/lib/redis（可通过 config get dir 查看）。

• 文件名：由配置项 dbfilename 决定，默认值为 dump.rdb（可通过 config get dbfilename 查看）。

压缩配置：

• RDB 文件默认使用 LZF 算法压缩，可通过配置项 rdbcompression yes|no 开启或关闭（默认 yes）。

• 关闭压缩可提升生成速度，但会增加文件体积，适用于 CPU 资源紧张的场景。

• 二进制格式：RDB 文件为二进制格式，不可直接读取，但体积小、恢复速度快。

RDB 恢复方式及时机

• 当 Redis 宕机重启之后会自动加载 rdb 文件（如果同时开启了 AOF，则优先加载 AOF）。

• 如果想强制加载 RDB，忽略 AOF 时，可在配置中设置 appendonly no，或在启动时指定 --loadrdb 参数。

• 手动加载指定加载 RDB 文件

# --dbfilename：指定dump.rdb文件的路径redis-server  --dbfilename /path/dump.rdb

RDB 实战

# 创建模拟数据127.0.0.1:6379> set test1 1OK127.0.0.1:6379> set test2 2OK127.0.0.1:6379> set test3 3OK127.0.0.1:6379> keys *1) "test1"2) "test2"3) "test3" # 执行快照127.0.0.1:6379> bgsaveBackground saving started [root@master /data00/data/redis]# lltotal 96-rw-r--r-- 1 root root   125 May 29 19:28 dump.rdb

模拟一下将 dump.rdb 文件删除，重启之后数据还在吗？

[root@master /data00/data/redis]# mv dump.rdb ~# 强制停止redis[root@master ~]# ps -ef | grep redisroot      908803  635754  0 19:38 pts/0    00:00:00 grep redisroot     1818909       1  0 May20 ?        00:19:44 redis-server 0.0.0.0:6379[root@master ~]# pkill redis-server

启动 Redis 服务

[root@master ~]# redis-server /data00/data/redis/redis.conf[root@master ~]# ss -lntup | grep 6379tcp   LISTEN 0      511                           0.0.0.0:6379       0.0.0.0:*    users:(("redis-server",pid=1807376,fd=6)) 

检查数据是否存在

127.0.0.1:6379> keys *(empty array)

模拟恢复 dump.rdb 文件

# 将dump.rdb文件迁移到Redis数据目录下[root@master /data00/data/redis]# mv ~/dump.rdb /data00/data/redis # 检查rdb文件是否损坏[root@master /data00/data/redis]# redis-check-rdb dump.rdb[offset 0] Checking RDB file dump.rdb[offset 27] AUX FIELD redis-ver = '6.2.18'[offset 41] AUX FIELD redis-bits = '64'[offset 53] AUX FIELD ctime = '1748518107'[offset 68] AUX FIELD used-mem = '875088'[offset 84] AUX FIELD aof-preamble = '0'[offset 86] Selecting DB ID 0[offset 125] Checksum OK[offset 125] \o/ RDB looks OK! \o/[info] 3 keys read[info] 0 expires[info] 0 already expired # 启动Redis并检查数据[root@master ~]# redis-server /data00/data/redis/redis.conf[root@master ~]# redis-cli 127.0.0.1:6379> auth !Xinxin123OK127.0.0.1:6379> keys *1) "test2"2) "test1"3) "test3"

AOF 持久化方式讲解

AOF（Append Only File）是 Redis 提供的一种实时性更强的持久化方式，通过记录所有写操作命令（而非数据本身）来保证数据的完整性。

核心原理

• 客户端发送写命令（如 SET key value）。

• Redis 执行命令并将结果返回客户端。

• 将命令写入 AOF 缓冲区（内存）。

• 根据配置策略将缓冲区内容同步到磁盘。

刷盘策略（appendfsync）

• always：每个写命令都同步到磁盘，最多会丢失一个命令

• everysec：每秒同步一次磁盘（默认配置），最多丢失 1 秒数据

• no：由操作系统决定何时刷盘（通常为 30 秒左右，取决于内核调度），可能会丢失大量数据

AOF 相关配置

# 启用 AOF（默认关闭）appendonly yes # 刷盘策略（推荐 everysec，兼顾安全与性能）appendfsync everysec # AOF 文件名（默认 appendonly.aof）appendfilename "appendonly.aof" # AOF 文件存储目录（与 RDB 共享，由 dir 参数决定）dir /var/lib/redis # 开启混合持久化（Redis 4.0+ 支持）aof-use-rdb-preamble yes

AOF 重写机制

为什么需要重写？

随着写命令不断追加，AOF 文件会越来越大，可能导致：

• 文件体积膨胀：占用大量磁盘空间。

• 恢复速度变慢：重启时需要重放更多命令。

重写原理

通过 BGREWRITEAOF 命令触发，Redis 会：

• fork 子进程遍历当前内存数据。

• 生成最简命令集（如合并多个 SET 为一个）。

• 替换原有 AOF 文件，保证原子性。

自动触发重写

在 redis.conf 中配置：

# 当 AOF 文件比上次重写后增长超过 100% 时触发auto-aof-rewrite-percentage 100 # AOF 文件至少达到 64MB 才触发重写（避免频繁重写小文件）auto-aof-rewrite-min-size 64mb

AOF 恢复机制

Redis 自动加载 AOF 日志

Redis 服务器启动时会优先尝试加载 AOF 文件来恢复数据，前提是满足以下条件：

1、配置文件中需启用 AOF 持久化，在 Redis 的配置文件（redis.conf）中，appendonly 参数需设置为 yes：

appendonly yes

2、存在有效的 AOF 文件，Redis 会检查 appendfilename 参数指定的 AOF 文件名（默认是 appendonly.aof）是否存在，且文件内容未损坏

混合持久化机制讲解

Redis 的混合持久化机制（Hybrid Persistence）是 Redis4.0 版本及以上的新特性，混合持久化机制（Hybrid Persistence）是结合了 AOF（Append Only File）和 RDB（Redis Database）两种持久化方式优点的策略，旨在提供更高效的数据恢复能力和更细粒度的数据安全性。

工作原理

混合持久化机制的核心是：

在执行 AOF 重写（BGREWRITEAOF）时，将当前内存中的数据以 RDB 快照格式写入 AOF 文件，后续的写命令继续以 AOF 格式追加到文件末尾。

具体流程如下：

• 启用混合持久化：在 redis.conf 中配置 aof-use-rdb-preamble yes（默认关闭）。

• AOF 重写触发：当 AOF 文件达到一定大小或手动执行 BGREWRITEAOF 时，Redis 会：生成 RDB 快照数据（二进制格式，紧凑高效）。将 RDB 数据写入新 AOF 文件的开头。继续将后续的写命令以文本协议格式追加到 AOF 文件末尾。

• 数据恢复：Redis 启动时，先加载 RDB 部分（快速恢复大部分数据），再执行 AOF 追加部分的命令（恢复最新操作）。

混合持久化相关配置

appendonly yes                # 启用 AOF 持久化aof-use-rdb-preamble yes      # 启用混合持久化（Redis 4.0+ 支持） # 触发AOF重写auto-aof-rewrite-percentage 100  # AOF 文件大小比上次重写后增长 100% 时触发auto-aof-rewrite-min-size 64mb   # AOF 文件最小达到 64MB 时触发

数据恢复流程

当 Redis 服务器重启时，加载混合 AOF 文件的流程：

• 检查文件格式：识别 AOF 文件是否包含 RDB 前缀。

• 加载 RDB 部分：快速解析二进制 RDB 数据，重建内存状态。

• 执行 AOF 部分：继续执行 RDB 之后的 AOF 命令，恢复最新操作。

混合持久化 vs 纯 AOF vs 纯 RDB 区别

文章转载自：huangSir-devops

原文链接：https://www.cnblogs.com/huangSir-devops/p/18903105

体验地址：http://www.jnpfsoft.com/?from=001YH