1 详解Redis主从复制和哨兵机制-德赢Vwin官网 网
0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

详解Redis主从复制和哨兵机制

汽车玩家 来源:简书 作者:GGarrett 2020-05-03 18:14 次阅读

1. Redis主从复制

1.1 Redis主从复制

详解Redis主从复制和哨兵机制

Redis主从复制主要有两个角色,主机(master)对外提供读写功能,从机(slave)对外只提供读功能,主机定期把数据同步到从机上保证数据一致性。

Redis主机数据同步到从机上有两种方式,一种是全量同步,另一种是增量同步。

主从复制不会阻塞master,在数据同步时,master还可以继续处理客户端请求,因为redis会产生一个新的进程来解决同步问题。

一个redis也可以是从也可以是主(树状主从),可以减轻主机压力。

1.2 Redis主从配置

只需要修改从服务器上的redis.conf文件:

# slaveof 《masterip》 《masterport》

# 表示当前【从服务器】对应的【主服务器】的IP是192.168.10.135,端口是6379。

slaveof 192.168.10.135 6379

启动主服务器 redis-server redis.conf

进入从服务器文件夹,启动从服务器

查看主服务器信息:redis-cli -p 6379 info Replication,可以看到有几个从服务器

1.3 实现原理

redis的主从同步分为两种,分为全量同步和增量同步。

只有从机第一次连接上主机是全量同步。

断线重连很有可能触发全量同步也有可能是增量同步(master判断runid`是否一致)。

runid

每个redis服务器,不论主服务器还是从服务,都会有自己的运行id。PSYNC runid 这个命令,runid是指上一次复制主服务器的运行id,如果没有保存这个id,PSYNC的命令会使用”PSYNC ? -1” 这种形式发送给Master,请求主服务器进行全量复制。

offset(复制偏移量)

主服务器和从服务器会分别维护一个复制偏移量,主服务器每次向从服务器传播N个字节的数据时,就将自己的复制偏移量的值加上N,从服务器每次收到主服务器传播来的N个字节的数据时,就将自己的复制偏移量值加上N。

详解Redis主从复制和哨兵机制

复制积压缓冲区

复制积压缓冲区是由主服务器维护一个固定长度(fixed-size)先进先出(FIFO)队列,默认大小是1MB。它主要的作用就是当主服务器进行命令传播时,不仅将命令发送给所有从服务器,还会将命令入队到复制积压缓冲区。如果主服务器向从服务器传播数据时发生断线,主服务器会将复制积压缓冲区偏移量的所有数据都发送给从服务器(发送的是断线之后的的数据)。

详解Redis主从复制和哨兵机制

PSYNC执行过程

1.Slave接受从客户端发送过来的SLAVEOF命令。

当前服务器判断自己是否保存Master runid是否是第一次复制。

如果是第一次复制那么当前服务器向Master发送PSYNC ? -1命令,主动请求Master进行全量同步。

如果已经父之过Master,那么当前从服务器向Master发送PSYNC runid offset命令。

Master接收到PSYNC 命令后首先判断runid是否和本机的id一致,如果runid和本机id不一致则返回+FULLRESYNC runid offset命令执行全量同步操作,当前服务器会将runid保存起来,在下次发送PSUNC时使用。

如果判断runid和本机id一致,Master则会再次判断offset偏移量和本机的偏移量相差有没有超过复制积压缓冲区大小,如果没有那么就给Slave发送CONTINUE,此时Slave只需要等待Master传回失去连接期间丢失的命令;

全量同步

Redis的全量同步主要分为三个阶段:

同步快照阶段:Master创建并发送快照给Slave,Slave再入快照并解析。Master同时将此阶段产生的新的命令写入到积压缓冲区中。

同步写缓冲阶段:Master向Slave同步存储在缓冲区的写操作命令。

同步增量阶段:Master向SLave同步写操作命令。

增量同步

Redis增量同步主要是指Slave完成初始化开始正常工作时,Master发生的写操作同步到Slave的过程。

通常情况下,Master没执行一个写命令就会想Slave发送相同的写命令,然后Slave接受并执行。

2. 哨兵(sentinel)机制

2.1 哨兵机制介绍

sentinel进程是用于监控Redis集群中Master主服务器工作的状态。

在Master主服务器发生故障的时候,可以实现Master和Slave服务器的切换,保证系统的高可用。

2.2 为什么要有哨兵机制?

Redis主从复制的缺点:没有办法对master进行动态选举,需要使用Sentinel机制完成动态选举。

2.3 哨兵的作用

监控(Monitoring):sentinel会不断检查Master和Slave是否运行正常。

提醒(Notification):当被监控的某个Redis节点出现问题时, sentinel 可以通过 API向管理员或者其他应用程序发送通知。

自动故障转移(Automatic failover):当Master不能正常操作时哨兵会开始一次故障转移。 它会将失效的Master的其中一个Slave升级为新的Master,并让其他Slave改为复制新的Master。 当客户端试图连接失效的Master时,集群会向客户端显示新的Master的地址。 Master和Slave切换后,Master的redis.conf、Slave的reids.conf和senisentinel的sentinel.conf配置文件的内容都会相应的改变,即,Master主服务器的redis.conf配置文件中会多一行slaveof的配置,sentinel.conf的监控目标会随之调换。

2.4 故障判断原理分析

每个sentinel进程每秒钟一次的频率向整个集群中Master、Slave以及其它Sentinel进程发送一个PING命令。

如果一个实例(instance)距离最后一次有效回复PING命令超过down-after-milliseconds选项所指定的值,这个实例会被sentinel进程标记为主观下线(SDOWN)。

如果一个Master主服务器被标记为主观下线(SDOWN),则正在监视这个Master主服务器的所有 Sentinel进程要以每秒一次的频率确认Master主服务器的确进入了主观下线状态。

当有足够数量的 Sentinel进程(大于等于配置文件指定的值)在指定的时间范围内确认Master主服务器进入了主观下线状态(SDOWN), 则Master主服务器会被标记为客观下线(ODOWN)。

在一般情况下, 每个 Sentinel进程会以每 10 秒一次的频率向集群中的所有Master主服务器、Slave从服务器发送 INFO 命令。

当Master主服务器被 Sentinel进程标记为客观下线(ODOWN)时,Sentinel进程向下线的 Master主服务器的所有 Slave从服务器发送 INFO 命令的频率会从 10 秒一次改为每秒一次。

若没有足够数量的 Sentinel进程同意 Master主服务器下线, Master主服务器的客观下线状态就会被移除。若 Master主服务器重新向 Sentinel进程发送 PING 命令返回有效回复,Master主服务器的主观下线状态就会被移除。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表德赢Vwin官网 网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 服务器
    +关注

    关注

    12

    文章

    9123

    浏览量

    85322
  • Redis
    +关注

    关注

    0

    文章

    374

    浏览量

    10871
收藏 人收藏

    评论

    相关推荐

    Redis使用重要的两个机制:Reids持久化和主从复制

    今天这篇文章,我们一起了解 Redis 使用中非常重要的两个机制:Reids 持久化和主从复制。 我们都知道Redis是一个内存数据库,在学习主从
    的头像 发表于 12-18 10:33 67次阅读
    <b class='flag-5'>Redis</b>使用重要的两个<b class='flag-5'>机制</b>:Reids持久化和<b class='flag-5'>主从复制</b>

    Redis缓存与Memcached的比较

    Redis和Memcached都是广泛使用的内存数据存储系统,它们主要用于提高应用程序的性能,通过减少对数据库的直接访问来加速数据检索。以下是对Redis和Memcached的比较,涵盖了它们的一些
    的头像 发表于 12-18 09:33 90次阅读

    配置MySQL主从复制和读写分离

    配置MySQL主从复制和读写分离
    的头像 发表于 10-23 11:44 407次阅读
    配置MySQL<b class='flag-5'>主从复制</b>和读写分离

    主从触发器和边沿触发器的区别

    主从触发器和边沿触发器是数字电路设计中常用的两种触发器类型,它们在触发机制、动作特点、应用场景等方面存在显著的区别。以下是对两者区别的详细阐述。
    的头像 发表于 08-12 14:50 1922次阅读

    Redis 开源协议调整,我们怎么办?

    2 024 年 3 月 20 日, Redis 官方宣布,从 Redis 7.4 版本开始,Redis 将获得源可用许可证 ( RSALv2 ) 和服务器端公共许可证 ( SSPLv1 ) 的双重
    的头像 发表于 05-09 22:59 429次阅读
    <b class='flag-5'>Redis</b> 开源协议调整,我们怎么办?

    Redis开源版与Redis企业版,怎么选用?

    点击“蓝字”关注我们数以千计的企业和数以百万计的开发人员Redis开源版来构建应用程序。但随着用户数量、数据量和地区性的增加,成本、可扩展性、运营和可用性等问题也随之而来。Redis企业版
    的头像 发表于 04-04 08:04 1047次阅读
    <b class='flag-5'>Redis</b>开源版与<b class='flag-5'>Redis</b>企业版,怎么选用?

    GaussDB(for Redis) 特性揭秘:多租户管理

    华为云 GaussDB(for Redis)持续完善企业级增强特性,是名副其实的 "Redis Plus" ,其中很经典的企业级特性是 多租户能力 ,支持添加只读账号、读写账号,且具备强大的 DB
    的头像 发表于 03-28 22:06 742次阅读
    GaussDB(for <b class='flag-5'>Redis</b>) 特性揭秘:多租户管理

    GaussDB(for Redis) 特性揭秘:大 key 治理

      从 DBA 的视角看,大 Key 无疑是引起 Redis 线上问题的常见原因。为了解决大 Key 隐患,业务首先要遵守合理的开发规范,减少大 Key 的产生和访问依赖。但有时大 Key 是在程序
    的头像 发表于 03-28 22:06 663次阅读
    GaussDB(for <b class='flag-5'>Redis</b>) 特性揭秘:大 key 治理

    新版 Redis 不再“开源”,对使用者都有哪些影响?

    2024 年 3 月 20 日,Redis Labs 宣布从 Redis 7.4 开始,将原先比较宽松的 BSD 源码使用协议修改为 RSAv2和 SSPLv1协议。该变化意味着 Redis
    的头像 发表于 03-27 22:30 488次阅读
    新版 <b class='flag-5'>Redis</b> 不再“开源”,对使用者都有哪些影响?

    Redis官方搜索引擎来了,性能炸裂!

    RediSearch 是一个 Redis 模块,为 Redis 提供查询、二级索引和全文搜索功能。
    的头像 发表于 02-21 10:01 2321次阅读
    <b class='flag-5'>Redis</b>官方搜索引擎来了,性能炸裂!

    MongoDB和Redis的技术特性

    Redis作为一个高性能的内存数据存储系统,能够提供快速的缓存机制,从而帮助应用承受高并发请求,显著提高系统响应速度和吞吐量。这与国内互联网公司推崇的快速迭代和高用户并发量的特点非常契合。
    的头像 发表于 02-01 11:42 499次阅读
    MongoDB和<b class='flag-5'>Redis</b>的技术特性

    Redis7单线程与多线程详解

    主要是指Redis的网络IO和键值对读写是由一个线程来完成的。
    的头像 发表于 01-16 17:33 1846次阅读
    <b class='flag-5'>Redis</b>7单线程与多线程<b class='flag-5'>详解</b>

    BLE蓝牙模块主从一体功能应用场景详解

    蓝牙模块支持多种工作模式,如主设备模式、从设备模式、主从一体化工作模式、广播站模式、Mesh组网模式、广播模式和iBeacon模式。在众多工作模式中,主从一体工作模式是最常用的,也是目前较为流行
    的头像 发表于 01-04 09:19 1317次阅读
    BLE蓝牙模块<b class='flag-5'>主从</b>一体功能应用场景<b class='flag-5'>详解</b>

    ad复制元件怎么保持编号不变

    复制AD(AutoCAD)元件时,如果要保持编号不变,可以按照以下步骤进行操作: 创建一个元件库:首先,你需要创建一个元件库,将你要复制的原始元件添加到库中。你可以使用AD软件的“设计中心”或“内容
    的头像 发表于 12-27 17:07 7212次阅读

    linux下Redis常用命令使用

    redis重启,缓存数据还在,redis清缓存数据
    的头像 发表于 12-27 09:56 6501次阅读
    linux下<b class='flag-5'>Redis</b>常用命令使用