redis 持久化原理与实战

官网介绍:http://www.redis.io

Redis 提供了2个不同形式的持久化方式。

  1. RDB(Redis DataBase)
  2. AOF(Append Of File)

docker安装redis

拉取redis镜像,展示镜像

docker pull redis:latest
docker images

创建myredis文件夹,在下面创建confdata两个子文件夹,用于映射docker redis中的redis.confdata文件夹

mkdir -p myredis/{conf,data}
cd myredis/conf
wget http://download.redis.io/redis-stable/redis.conf

修改redis.conf文件,主要修改以下几个地方

  • bind 将这个注释掉,保证redis可以远程访问
  • requirepass 设置密码
  • daemonize 这个要注释掉,不然docker容器起不来
  • appendonly 用于开启AOFAppend-only file)默认是no,如果想开启,改成yes即可。

myredis路径下,运行docker

# home/sdz/myredis
docker run -d \
-p 6379:6379 \
-v $PWD/conf/redis.conf:/etc/redis/redis.conf \
-v $PWD/data:/data --name myredis \
--restart=always \
--privileged=true \
redis redis-server /etc/redis/redis.conf

进入redis客户端

docker exec -it myredis redis-cli

RDB(Redis DataBase)

定义

在指定的时间间隔内将内存中的数据集快照写入磁盘, 即Snapshot快照,它恢复时是将快照文件直接读到内存里。

流程

Redis会单独创建(fork)一个子进程来进行持久化,会先将数据写入到 一个临时文件中,待持久化过程都结束了,再用这个临时文件替换上次持久化好的文件。 整个过程中,主进程是不进行任何IO操作的,这就确保了极高的性能 如果需要进行大规模数据的恢复,且对于数据恢复的完整性不是非常敏感,那RDB方式要比AOF方式更加的高效。RDB的缺点是最后一次持久化后的数据可能丢失

image-20220213220512457

实战

配置

redis.conf中配置文件名称,默认为dump.rdbrdb文件的保存路径,也可以修改。默认为Redis启动时命令行所在的目录下。docker上面配置了data目录,会在那里显示。

dbfilename dump.rdb

image-20220213221821605

image-20220213223038281

配置文件中默认的快照配置

格式:save 秒钟 写操作次数

RDB是整个内存的压缩过的SnapshotRDB的数据结构,可以配置复合的快照触发条件,

默认是1分钟内改了1万次,或5分钟内改了10次,或15分钟内改了1次。
推荐:禁用,不设置save指令,或者给save传入空字符串

image-20220213223739217

命令

savesave时只管保存,其它不管,全部阻塞。手动保存。不建议。

bgsaveRedis会在后台异步进行快照操作,快照同时还可以响应客户端请求。

可以通过lastsave 命令获取最后一次成功执行快照的时间

redis.conf 其他相关配置

  • stop-writes-on-bgsave-error:当Redis无法写入磁盘的话,直接关掉Redis的写操作。推荐yes

  • rdbcompression 压缩文件: 对于存储到磁盘中的快照,可以设置是否进行压缩存储。如果是的话,redis会采用LZF算法进行压缩。如果不想消耗CPU来进行压缩的话,可以设置为关闭此功能。推荐yes

  • rdbchecksum 检查完整性:在存储快照后,还可以让redis使用CRC64算法来进行数据校验,

    但是这样做会增加大约10%的性能消耗,如果希望获取到最大的性能提升,可以关闭此功能。推荐yes

如何停止

动态停止RDBredis-cli config set save "" save后给空值,表示禁用保存策略

rdb的备份

先通过config get dir 查询rdb文件的目录

*.rdb的文件拷贝到别的地方

rdb的恢复

  • 关闭Redis

  • 先把备份的文件拷贝到工作目录下 cp dump2.rdb dump.rdb

  • 启动Redis, 备份数据会直接加载

优势

  • 适合大规模的数据恢复
  • 对数据完整性和一致性要求不高更适合使用
  • 节省磁盘空间
  • 恢复速度快

劣势

  1. Fork的时候,内存中的数据被克隆了一份,大致2倍的膨胀性需要考虑
  2. 虽然Redisfork时使用了写时拷贝技术,但是如果数据庞大时还是比较消耗性能。
  3. 在备份周期在一定间隔时间做一次备份,所以如果Redis意外down掉的话,就会丢失最后一次快照后的所有修改。

小结

image-20220213225918366

AOF(Append Only File)

定义

日志的形式来记录每个写操作(增量保存),将Redis执行过的所有写指令记录下来(读操作不记录), 只许追加文件但不可以改写文件redis启动之初会读取该文件重新构建数据,换言之,redis 重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。

流程

  1. 客户端的请求写命令会被append追加到AOF缓冲区内;
  2. AOF缓冲区根据AOF持久化策略[always,everysec,no]将操作sync同步到磁盘的AOF文件中;
  3. AOF文件大小超过重写策略或手动重写时,会对AOF文件rewrite重写,压缩AOF文件容量;
  4. Redis服务重启时,会重新load加载AOF文件中的写操作达到数据恢复的目的;

image-20220211141833860

实战

AOF默认不开启,可以在redis.conf中配置文件名称,默认为 appendonly.aof

AOF文件的保存路径,同RDB的路径一致。

注意:AOFRDB同时开启,系统默认取AOF的数据(数据不会存在丢失)。

posted @ 2022-02-13 23:05  pxlsdz  阅读(2413)  评论(0编辑  收藏  举报