PHP8.1.21版本已发布
vue8.1.21版本已发布
jquery8.1.21版本已发布

Redis持久化完整版本

咔咔
咔咔 原创
2020-05-27 11:04:39 1483浏览


持久化的简介

RDB

AOF

RDB与AOF的区别

持久化应用场景


对于持久化这个功能点,其实很简单没有那么复杂


演示环境


centos7.0

redis4.0

redis存放目录:/usr/local/redis

redis.conf存放目录:/usr/local/redis/data


1. 持久化简介


redis的所有数据都是保存在内存中,redis崩掉数据会丢失。redis持久化就是把数据保存在磁盘上。利用永久性存储介质将数据进程保存,在特定的时间将保存的数据进行恢复的工作机制称为持久化。


持久化过程保存的是什么呢?


第一种快照形式,存储数据结果,关注点在数据,也就是下文会讲到的RDB


第二种操作过程,存储操作过程,关注点在数据的操作过程,也就是下文会讲到的AOF


2. RDB


2-1 RDB启动方式  --  save命令


下图是redis.conf的配置信息,在执行完save后会生成一个dump.rdb的文件

现在我们设置一个值,然后save一下,在/usr/local/redis/data下就会有一个dump6379.rdb的一个文件


2-2 RDB使用方式之save


  • dbfilename dump6379.rdb :设置RDB文件名,默认值为dump.rdb
  • dir:存储rdb或者aof文件的路径
  • rdbcompression yes :设置存储时是否压缩数据,默认为yes,采用lzf压缩
  • rdbchecksum yes:设置是否进行RDB文件格式校验,该校验过程在写文件和读文件过程均进行


2-3 RDB数据恢复


其实这个数据恢复相对于其他关系型数据库恢复基本就不用操作什么。只需要重新在启动就好了


2-4 RDB -- save指令工作原理


当你执行save时,其他客户端请求redis的指令都会等待,直到save指令执行完成。因为save指令是单线程执行,一旦执行时间过长会直接导致其他用户端无法正常存储数据。所以这个指令我们默认被废弃。会使用下文介绍的bgsave来代替


2-5 RDB -- bgsave指令工作原理


当在redis执行了bgsave后会直接返回一个Background saving started


这个时候我们在看一下日志文件,bgsave命令是针对save阻塞问题做的优化


2-5 RDB -- 配置文件自启动


以下配置是默认配置
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes


save  【时间】 【key改变数量】


也就是说在300秒有10个key值发生变化了,就会在后台执行bgsave


3. AOF


3-1 AOF概念

AOF文件存储的是执行命令操作过程,恢复数据也是使用操作过程来恢复。


3-2 AOF写数据过程


执行一条redis命令


redis的AOF会把命令刷新缓冲区


然后根据一定的方式同步的到redis.conf配置的.aof文件中


3-3 AOF写数据的三种策略


  • always:执行的命令都会存储到AOF文件中,数据零误差,性能较低,不建议使用
  • everysec:每秒将缓冲区中的指令同步到AOF文件中,数据准确性较高,性能较高,建议使用,也是默认配置。但是在系统突然宕机的情况下回丢失1秒内的数据
  • no:由操作系统控制每次同步到AOF文件的周期,整体过程不可控



3-4 AOF功能开启


  • 配置:appendonly yes|no
  • 作用:是否开启AOF持久化功能,默认为不开启状态
  • 配置:appendfsync always| everysec | no
  • 作用:AOF写数据策略
  • 配置:appenfilename filename
  • 作用:AOF持久化文件名,默认名为appendonly.aof


然后使用重启redis服务,就可以在usr/local/redis/data目录下可以看到appendonly.aof文件了

然后我们在redis客户端执行一条命令,在来查看一下。可以看到数据都会存入appendonly.aof这个文件中。


3-5 AOF写数据出现的问题


我们先看一个案例,我们重复设置了name这个key后,打开appendonly.aof文件查看,可以看到有三个操作,但是这三个操作我们都是修改的一个key啊!我们只保存最后一个key不行吗?带着这个疑问,我们在继续往下看


3-6 AOF重写


如在上边我们执行了三次  set  name  指令,但是我们最终就只需要最后一次执行的记录。也就是我们只需要最后一次执行记录即可。其他的记录就不需要了,然后会把压缩后的数据重写到aof文件中。


重写后我们的磁盘利用率就提高了

还有就是我们恢复数据的速度也会变快

同时也会提高持久化的效率


3-7 AOF重写规则


  • 进程内已超时的数据不再写入文件
  • 忽略删除指令,如del,hdel,srem。  还有就是3-5说的问题,连续对一个key进行操作
  • 对同一数据的多条写入记录合并为一条记录:如lpush list a lpush lsit b lpush list c可以转化为lpush list a b c


3-8 AOF手动重写


指令:bgrewriteaof


接着我们3-5的问题,我们在命令行执行bgrewriteaof指令然后查看appendonly.aof文件


当执行完后会发现文件变小了,文件里也就只有一条指令了



3-9 AOF手动重写工作原理



3-10 AOF自动重写


配置:auto-aof-rewrite-percentage 100 | auto-aof-rewrite-min-size 64mb

触发对比参数:aof_current_size | aof_base_size


当aof_current_size   >   auto-aof-rewrite-min-size 64mb  会启动重写


此图来源于网络


3-11 AOF工作流程和重写流=流程



4. 总结


以上就是redis持久化的所有内容。

声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn核实处理。