Redis系列(四):Redis持久化和主从复制原理 (2)

Redis系列(四):Redis持久化和主从复制原理

   AOF重写:

  (1)AOF文件里可能有太多没用指令,所以AOF会定期根据内存的最新数据生成新的aof文件,当然可以手工执行bgrewriteaof命令也能重写AOF,比如执行如下命令:

Redis系列(四):Redis持久化和主从复制原理

   (2)重写后AOF文件里变成:

Redis系列(四):Redis持久化和主从复制原理

   如下两个配置可以控制AOF自动重写频率:

  ① auto-aof-rewrite-min-size 64mb :aof文件至少要达到64M才会自动重写。

  ② auto-aof-rewrite-percentage 100 :aof文件自上一次重写后文件大小增长了100%则再次触发重写。

  当然AOF还可以手动重写,进入redis客户端执行如上图命令bgrewriteaof重写AOF注意,AOF重写Redis会fork出一个子进程去做,不会对Redis正常命令处理有太多影响。

  3、RDB和AOF对比

  Redis启动时如果既有RDB文件又有AOF文件则优先选择AOF文件恢复数据,因为AOF一般来说数据更全一点。

持久化方式   RDB   AOF  
启动优先级      
文件大小      
恢复速度      
数据安全性   容易丢数据   根据策略决定  
   4、Redis4.0混合持久化

  重启Redis时,我们很少使用 RDB来恢复内存状态,因为会丢失大量数据。我们通常使用AOF日志重放,但是重放AOF日志性能相对RDB来说要慢很多,这样在 Redis 实例很大的情况下,启动需要花费很长的时间。 Redis4.0为了解决这个问题,带来了一个新的持久化选项——混合持久化。配置如下:

Redis系列(四):Redis持久化和主从复制原理

   如果开启了混合持久化,AOF在重写时,不再是单纯将内存数据转换为RESP命令写入AOF文件,而是将重写这一刻之前的内存做RDB快照处理,并且将RDB快照内容和增量的AOF修改内存数据的命令存在一起,都写入新的AOF文件,新的文件一开始不叫appendonly.aof,等到重写完新的AOF文件才会进行改名,原子的覆盖原有的AOF文件,完成新旧两个AOF文件的替换。于是在Redis重启的时候,可以先加载RDB的内容,然后再重放增量AOF文件就可以完全替代之前的AOF全量文件重放,因此重启效率大幅得到提升。

Redis系列(四):Redis持久化和主从复制原理

 二、Redis主从

Redis系列(四):Redis持久化和主从复制原理

   1、主从复制概念

  主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master),后者称为从节点(slave),数据的复制是单向的,只能由主节点到从节点。

   2、主从复制的原理   (1)全量复制

  将主节点中的所有数据都发送给从节点,是一个非常重型的操作,当数据量较大时,会对主从节点和网络造成很大的开销。全量复制流程图如下:

Redis系列(四):Redis持久化和主从复制原理

  ① slave会发出一个同步命令,刚开始是Psync命令,表示要求master主机同步数据

  ② master收到psync命令后,会通过执行bgsave生成最新的RDB快照文件,持久化期间,master会继续接收客户端的请求,它会把写请求缓存在内存中

  ③ 发送RDB文件给slave

  ④ master再将之前缓存在内存中的命令发送给slave

  ⑤ 刷新旧的数据。slave在载入主节点的数据之前要先将老数据清除

  ⑥ 加载RDB文件将数据库状态更新至主节点执行bgsave时的数据库状态和缓冲区数据的加载

  ⑦ master同步长连接持续把写命令发送给slave,以保证数据的一致

  (2)部分复制

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:https://www.heiqu.com/zywjpd.html