文章原创于公众号:程序猿周先森。本平台不定时更新,喜欢我的文章,欢迎关注我的微信公众号。

上一篇讲到了Redis的持久化机制,有RDB快照持久化以及AOF日志持久化。Redis的持久化机制保证了Redis即使服务重启,也可以将硬盘中已经持久化的数据进行恢复,持久化机制保证了Redis持久化过程即使出现宕机,最多也只会丢失1秒之内的数据。在80%左右企业使用的都是Redis单机服务,在生产环境下使用单机环境的Redis容易面临风险,如果Redis持久化的硬盘出现故障,则有可能导致持久化的备份数据出现丢失,所以我们需要一个方案解决这个问题,所以我们需要将原来集中式的数据库中的数据分别复制到不同Redis节点上进行存储,这也就是Redis中的主从复制。

概念

什么叫做主从复制?Redis主从复制实际上就是将主Redis服务器的数据,复制到其他从Redis服务器去进行存储,默认情况下每台Redis服务器都是主节点,一个主节点可以拥有多个从节点,但是每个从节点只能设置一个主节点。数据复制是单向复制,只能从主节点复制到从节点中存储。在主节点中不需要进行特殊的配置,而只需要在从节点添加slaveof指令:

  • slaveof 主节点端口号> 主节点ip>

在从节点的配置文件中通过slaveof指令可以设置该从节点拥有的主节点。

开启主从复制方式

在从节点中配置slaveof指令一共有三种方式:

  • 在redis.conf配置文件中配置:在配置文件中加入:slaveof 。 主节点端口号> 主节点ip>
  • 从节点启动命令添加slaveof参数:在reids启动命令后加上 --slaveof 。 主节点端口号> 主节点ip>
  • 从节点Redis启动成功执行slaveof命令:slaveof 。 主节点端口号> 主节点ip>

主从复制的作用

  • 数据冗余:可以实现数据热备份,在Redis持久化的基础上进一步对数据备份进行优化。
  • 故障恢复:当主节点硬盘持久化出现问题,可以快速从从节点提供服务,实现数据恢复。
  • 读写分离:可以主节点负责所有写操作,从节点负责所有读操作,实现Redis读写分离提高服务器负载能力。
  • 负载均衡:主从复制配合实现读写分离,可以减轻服务器负载,实现负载均衡。
  • 高可用:主从复制是实现集群的基础,所以高并发下主从配置是必不可少的配置之一。

主从复制三大阶段

主从复制主要分为3个大阶段:准备阶段、数据同步阶段、命令传输阶段。

准备阶段

保存主节点信息

从节点服务器中存在两个字段:masterhost和masterport。masterhost字段用于存储主节点的ip信息,masterport用于存储主节点的端口号信息,实际上就是我们通过slaveof指令设置的信息。

主节点与从节点建立socket连接

成功执行slaveof指令,从节点会每秒1次定时调用replicationCron()函数,寻找是否可以连接主节点,当发现存在新的主节点时,便通过上一步维护的ip与port尝试与该主节点建立socket连接。当主节点与从节点成功建立socket连接,从节点会建立一个ssocket套接字,专门负责接受主节点发送的复制数据命令。而主节点同时也会为该从节点创建相应的客户端状态。

发送ping命令

通过上一步,从节点就成功的成为主节点的一个客户端。可以通过发送ping请求进行第一次请求,第一次请求的目的不是为了复制数据,而是为了检查刚才创建的socket连接是否可用以及主节点是否可以能够正常处理请求。从节点向主节点发送ping命令一般会有三种响应结果:

  • 返回pong:表示socket连接可用,可以继续操作。
  • 超时未返回:表示socket不可用,则从节点断开socket连接。
  • 返回其他结果:代表主节点目前处于忙碌状态无法处理从节点请求,则从节点断开socket连接。

权限验证

如果主节点配置了requirepass参数,则表示需要权限验证,从节点必须配置masterauth参数,masterauth参数配置成与主节点requirepass参数一致,才可以通过验证。否则权限验证失败,从节点断开socket连接。

数据同步阶段

准备工作结束后,便可以进行数据同步。首次数据复制,主节点会将所有数据发送给子节点,也就是全量复制,所以这部分是耗时操作。非首次数据同步,则会根据主节点和从节点当前状态的不同,选择全量复制或者不分肤质。在本阶段,主节点需要主动向从节点发送请求完成复制。

数据全量复制

主节点收到全量复制的请求后,fork出一个后台进程,将数据库快照生成RDB文件,并且将生成过程中接受到的写请求暂时缓存,否则会影响数据一致性。然后在RDB文件生成之后将RDB文件发送给从节点,从节点先清除旧数据,然后接收RDB文件更新数据,最后主节点将缓存的写命令全部发送给从节点,从节点执行写命令,最终保持和主节点的数据一致性。

部分复制

因为进行全量复制要fork子进程并且进行RDB持久化会极度消耗CPU,而且发送RDB文件给从节点也会对网络带宽造成影响,所以全量复制实际效率并不高,所以可以使用部分复制对数据进行主从复制。进行部分复制时,主节点和从节点会分别维护一个offset变量来存储主节点传递给从节点的字节数,通过offset可以判断主从节点数据是否一致,若不一致可以从从节点所在的offset字节数然后在主节点的offset轻松找到缺少的数据进行部分复制。但是进行部分复制最关键的一点就是必须为非首次复制,主从节点首次复制必须为全量复制过程。

命令传输阶段

当主节点将当前数据同步给从节点后,复制的建立流程就完成了。只要从节点不关闭主从复制,则主节点会不断的把写命令发送给从节点,保证主从数据的一致性。命令传输阶段是异步操作,所以可能存在一定程度的延迟,无法保证数据的实时一致性。

欢迎关注公众号:程序猿周先森。

本文由博客一文多发平台 https://openwrite.cn?from=article_bottom 发布!

redis 首次请求_Redis主从复制相关推荐

  1. java redis 主从 哨兵_Redis主从复制与哨兵机制

    Redis主从复制 1.redis的复制功能是支持多个数据库之间的数据同步.一类是主数据库(master)一类是从数据库(slave),主数据库可以进行读写操作,当发生写操作的时候自动将数据同步到从数 ...

  2. redis 集群_Redis集群管理

    阅读文本大概需要10分钟. 1.简介 Redis在生产环境中一般是通过集群的方式进行运行,Redis集群包括主从复制集群和数据分片集群两种类型. *主从复制集群提供高可用性,而数据分片集群提供负载均衡 ...

  3. redis value最大值_Redis基础知识整理

    Redis安装和使用 使用Docker安装Redis docker run --name redis -p 6379:6379 --restart always -d redis 使用redis-cl ...

  4. 2.redis高可用-持久化-主从复制-哨兵-cluster集群概述与部署,内容依旧多看完直接通透!

    文章目录 一,Redis 高可用 1.持久化 2.主从复制 3.哨兵 4.集群(cluster) 二,Redis 持久化方式 1.持久化的功能 2.持久化的方式 三, RDB 持久化 1.触发条件 2 ...

  5. Nginx+Lua+Redis 对请求进行限制

    Nginx+Lua+Redis 对请求进行限制 一.概述 需求:所有访问/myapi/**的请求必须是POST请求,而且根据请求参数过滤不符合规则的非法请求(黑名单), 这些请求一律不转发到后端服务器 ...

  6. Redis集群之主从复制

    本文来说下Redis集群之主从复制 文章目录 概述 主从复制 主从同步原理 上文提到的数据不一致是怎么回事 无硬盘复制 增量复制 本文小结 概述 跟Kafka.RocketMQ.MySQL.ZooKe ...

  7. redis mysql 雪崩_Redis缓存雪崩问题

    一.什么是缓存雪崩 缓存雪崩就是指缓存由于某些原因(比如 宕机.cache服务挂了或者不响应)整体crash掉了,导致大量请求到达后端数据库,从而导致数据库崩溃,整个系统崩溃,发生灾难. 下面的就是一 ...

  8. redis集群之主从复制+哨兵模式

    文章目录 一.redis集群之主从复制 1.1.集群介绍 1.2.搭建过程 1.3.验证 二.redis集群之哨兵模式 2.1.部署过程 1.搭建主从复制集群 2.设置哨兵模式的配置文件 3.启动哨兵 ...

  9. java redis 主从配置_Redis实现主从复制(MasterSlave)

    Redis实现主从复制(Master&Slave) Redis主从复制 1.是什么 1.单机有什么问题: 单机故障 容量瓶颈 qps瓶颈 主机数据更新后根据配置和策略,自动同步到备机的mast ...

最新文章

  1. #实现互联网聊天_局域网内两台电脑如何实时语音聊天通话
  2. 已知旋转矩阵求角度_如何推导旋转矩阵
  3. [凡文]Docker+Jenkins+Gradle+GitLab在Linux服务端自动化构建Android包
  4. (转)jquery图片左右滚动
  5. ubuntu 安装mono Fiddler后The proxy server is refusing connections
  6. 顺序表基本操作的实现
  7. git创建本地版本仓库
  8. 手机html设计规范,手机网页设计尺寸规范具体是多少?
  9. 上市商业银行手机银行App月活增长及应用对标分析
  10. php file_get_contents路径问题,file_get_contents与相对路径
  11. mysql 导入tsv文件,MySQL导出TSV格式文件
  12. 【手机】手机选购指南
  13. 【ROM制作工具】如何三分钟学会制作手机线刷包?一键制作线刷包详细教程
  14. 找出1000以内所有的完数
  15. linux查看某个ip流量--思路一例
  16. 字库芯片介绍与使用(附STM32程序~~~)
  17. 如何实现双向链表的插入、删除操作
  18. 读书笔记:仍然不足够
  19. leetcode 911在线选举
  20. php http 缓存,如何设计一个完美的http缓存策略

热门文章

  1. 关于 php 用webservice传输数据的问题(nosoap与.NET对接)此处一直困扰三天时间,终于解决...
  2. ssh放行端口_安全组中已经添加规则放行SSH端口的访问之后如何使用f1 RTL
  3. c语言两数相加vs,两数相加(C语言)
  4. mysql客户端报错1366_mysql一些异常
  5. 内蒙古联通与锡盟行政公署签大数据合作协议
  6. php分享二十:mysql优化
  7. Hibernate一对一主键单向关联
  8. 关于glusterfs-3.0.4中AFR修复的一个bug
  9. 面试收集—hello,world 也有新花样
  10. Cisco路由器IOS映像恢复及升级方法