SYSTEM
复制流程
src/content/notes/system/复制流程.md 复制流程
旧版复制
Redis 的复制功能分为同步(sync)和命令传播(command propagate)两个操作,主从库间的复制是异步进行的
同步操作用于将从服务器的数据库状态更新至主服务器当前所处的数据库状态,该过程又叫全量复制:
- 从服务器向主服务器发送 SYNC 命令来进行同步
- 收到 SYNC 的主服务器执行 BGSAVE 命令,在后台生成一个 RDB 文件,并使用一个缓冲区记录从现在开始执行的所有写命令
- 当 BGSAVE 命令执行完毕时,主服务器会将 RDB 文件发送给从服务器
- 从服务接收并载入 RDB 文件(从服务器会清空原有数据)
- 缓冲区记录了 RDB 文件所在状态后的所有写命令,主服务器将在缓冲区的所有命令发送给从服务器,从服务器执行这些写命令
- 至此从服务器的数据库状态和主服务器一致
命令传播用于在主服务器的数据库状态被修改,导致主从数据库状态出现不一致时, 让主从服务器的数据库重新回到一致状态
- 主服务器会将自己执行的写命令,也即是造成主从服务器不一致的那条写命令,发送给从服务器
- 从服务器接受命令并执行,主从服务器将再次回到一致状态
功能缺陷
SYNC 本身就是一个非常消耗资源的操作,每次执行 SYNC 命令,都需要执行以下动作:
- 生成 RDB 文件,耗费主服务器大量 CPU 、内存和磁盘 I/O 资源
- RDB 文件发送给从服务器,耗费主从服务器大量的网络资源(带宽和流量),并对主服务器响应命令请求的时间产生影响
- 从服务器载入 RDB 文件,期间会因为阻塞而没办法处理命令请求
SYNC 命令下的从服务器对主服务器的复制分为两种情况:
- 初次复制:从服务器没有复制过任何主服务器,或者从服务器当前要复制的主服务器和上一次复制的主服务器不同
- 断线后重复制:处于命令传播阶段的主从服务器因为网络原因而中断了复制,自动重连后并继续复制主服务器
旧版复制在断线后重复制时,也会创建 RDB 文件进行全量复制,但是从服务器只需要断线时间内的这部分数据,所以旧版复制的实现方式非常浪费资源
新版复制
Redis 从 2.8 版本开始,使用 PSYNC 命令代替 SYNC 命令来执行复制时的同步操作(命令传播阶段相同),解决了旧版复制在处理断线重复制情况的低效问题
PSYNC 命令具有完整重同步(full resynchronization)和部分重同步(partial resynchronization)两种模式:
- 完整重同步:处理初次复制情况,执行步骤和 SYNC命令基本一样
- 部分重同步:处理断线后重复制情况,主服务器可以将主从连接断开期间执行的写命令发送给从服务器,从服务器只要接收并执行这些写命令,就可以将数据库更新至主服务器当前所处的状态,该过程又叫部分复制