01-主从复制概述

  • 单机redis存在的问题

    • ①硬盘故障, 导致数据丢失, redis不好用;
    • ②内存容量受限制, 单台服务器内存扩展有上限, 内存数据超过该上线, 该如何处理.

  • 解决方案

    • 1个master可以有多个slave, 1个slave只能对应1个master

    • master: 主机, 可以读也可以写, 主要负责写.

    • slave: 从机, 只能读.

    • 保证master和slave数据同步.

  • 主从复制

    • 将master中的数据实时地, 有效地同步到从机.

  • 好处

    • 读写分离: master只负责写, slave只负责读
    • 负载均衡: 多台redis服务器分担客户端负载
    • 故障恢复: master宕机, 由slave提供服务
    • 数据冗余: 数据备份到多台redis服务器
    • 高可用: 是哨兵和集群的基础

02-主从复制搭建及演示

  • 需求

    • 搭建1主1从的结构

  • 配置说明

    #从机的配置文件slaveof 主机ip 主机port

  • ①master配置文件

    port 6379daemonize no# logfile "log-6379.log"maxclients 100000timeout 0loglevel debug# RDB设置# 1.设置rdb文件名dbfilename "dump-6379.rdb"# 2.设置rdb文件存储路径dir /usr/local/redis-6379/data# 3.设置存储rdb时是否压缩数据rdbcompression no# 4.设置读写文件过程是否进行RDB格式校验rdbchecksum no# 5.后台存储过程中如果出现错误现象，是否停止保存操作stop-writes-on-bgsave-error yes# 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令save 10 2# AOF设置# 1.开启aof持久化功能appendonly yes# 2.设置aof文件名appendfilename 'appendonly-6379.aof'# 4.设置aof策略appendfsync everysec# 5.当前aof文件大小达到64mb，自动触发AOF重写auto-aof-rewrite-min-size 64mb# 5.当前aof文件大小比之前aof文件大小增加了100%，自动触发AOF重写auto-aof-rewrite-percentage 100protected-mode no

  • ②slave配置文件

    port 26379daemonize no# logfile "log-26379.log"maxclients 100000timeout 0loglevel debug# RDB设置# 1.设置rdb文件名dbfilename "dump-26379.rdb"# 2.设置rdb文件存储路径dir /usr/local/redis-26379/data# 3.设置存储rdb时是否压缩数据rdbcompression no# 4.设置读写文件过程是否进行RDB格式校验rdbchecksum no# 5.后台存储过程中如果出现错误现象，是否停止保存操作stop-writes-on-bgsave-error yes# 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令save 10 2# AOF设置# 1.开启aof持久化功能appendonly yes# 2.设置aof文件名appendfilename 'appendonly-26379.aof'# 4.设置aof策略appendfsync everysec# 5.当前aof文件大小达到64mb，自动触发AOF重写auto-aof-rewrite-min-size 64mb# 5.当前aof文件大小比之前aof文件大小增加了100%，自动触发AOF重写auto-aof-rewrite-percentage 100protected-mode no#主机ip和主机portslaveof 192.168.199.110 6379

  • ③启动主机

  • ④启动从机

  • ⑤演示主从结构

    • 分别使用redis客户端链接主机和从机操作读写指令.

03-主从复制之建立链接阶段

  • 建立链接阶段

  • 总结

    • ①master保存了slave的port
    • ②slave保存了master的host和port
    • ③master和slave建立心跳机制(ping/pong)

04-主从复制之数据同步阶段

  • 数据同步阶段

  • 总结

    • ①第一次链接, 通过全量复制(RDB)将master的数据备份到slave
    • ②后续的指令, 通过部分复制(AOF)将master的数据备份到slave

05-部分复制的三要素

  • 三要素
    • ①服务器运行id(run id)
    • ②主服务器的复制缓冲区
    • ③主从服务器的复制偏移量
  • ①服务器运行id(run id)
  • ②主服务器的复制缓冲区
  • ③主从服务器的复制偏移量
    • 从机应该从哪里开始执行部分复制
    • 1个master有多个偏移量, 1个slave有一个偏移量

06-主从复制之命令传播阶段

  • 命令传播阶段
    • 当master数据库状态被修改后，导致主从服务器数据库状态不一致，此时需要让主从数据同步到一致 的状态，同步的动作称为命令传播 master将接收到数据变更命令发送给slave，slave接收命令后执行
  • 网络出现问题
    • 网络闪断闪连，可以忽略
    • 短时间网络中断，部分复制 (AOF)
    • 长时间网络中断，全量复制(RDB)