百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

详解redis的主从复制模式

bigegpt 2024-08-12 14:16 2 浏览

在有一定规模的系统中,引入缓存是必须的。目前,redis已经成为分布式缓存领域事实上的霸主,其他的如memcached等则逐渐的退出了历史舞台。redis已如此重要,如果在系统中仍然以单点的形式存在,那么一旦发生故障,轻则可导致数据库压力倍增,重则让系统崩溃,产生重大损失。为了避免单点故障,提高可用性,redis提供了主从复制的集群模式。

主从复制模式是一种基本的集群模式。集群中包含两种角色,主节点和从节点。它通过把数据从主节点复制到从节点的方式,实现集群中所有节点都拥有同一份数据。

1、主从复制集群的结构

在主从复制模式中,集群的主从节点的结构通常有两种。

一种是从节点全部从主节点同步数据。结构如下图:

这个结构的优点是:所有从节点都从主节点同步数据,步调基本一致,延迟较少。但缺点也很明显,就是主节点的压力较大。

另外一种结构是只有少量的从节点直接从主节点同步数据,其他的从节点从从节点同步数据,形成一种级联结构,结构如下图:

这种结构的优缺点基本与前一种结构相反,主节点由于只有一个从节点,所以压力较小,但同时,只有主节点的直接从节点的数据同步延迟较小,其他的从节点,越往后,延迟越大。当然,这里也有其他的变种,比如如图中的红色虚线表示的,其他从节点直接作为第一个从节点的从节点。

2、主从复制的过程

redis的主从复制支持两种方式,全量复制和增量复制。

全量复制

全量复制一般发生在从节点的初始化节点,此时从节点没有数据,需要从主节点同步全部数据。过程如下:

(1)从(节点)服务器连接主(节点)服务器,发送SYNC命令

(2)主服务器收到SYNC命令后,执行BGSAVE命令生成RDB快照文件并使用缓冲区记录随后的所有写命令

(3)主服务器执行BGSAVE完成后,向所有从服务器发送RDB快照文件(每次生成磁盘文件,效率较低,在2.8以后做了优化,可以不生成文件),并继续记录所有的写命令

(4)从服务器收到RDB快照文件后,清除所有旧数据,载入快照中的新数据

(5)主服务器在快照文件发送完成后,向所有从服务器发送缓冲区中的写命令

(6)从服务器完成RDB快照的载入后,开始接收命令请求,并同时接收来自主服务器的写命令

时序图如下:

全量同步有一些缺点:

(1)同步的数据量大,性能影响比较大。在初次同步的时候是必要的,但是有些时候则有点多余,比如从服务器开启了持久化,因某种原因停机重启。

(2)有一个隐含的重大隐患,比如主服务器没有开启持久化,由于某种原因重启,此时主服务器没有数据,从服务器重连上来后,要开启同步,可能导致从服务器的所有数据被清空。

所以需要一种只同步少量数据的机制,那就是增量同步。

增量同步

过程如下:

(1)从服务器连接主服务器,发送PSYNC命令,带上主服务器的runid(机器标识)和offset(数据偏移量)

(2)主服务器验证runid和offset是否有效,无效则开启全量同步,有效则从offset处同步增量数据

3、主从复制的优缺点

主从复制有如下优点:

(1)配置简单,易于实现(2)实现数据备份和冗余,提高数据可靠性(3)实现读写分离,提高系统性能

但也有如下缺点:

(1)在主节点发生故障时,只能手动切换,故障恢复时间长,必须借助其他手段完成自动切换

(2)所有的写操作都在主节点上,主节点的压力大,会成为性能瓶颈

(3)所有节点都保持同一份数据,不能进行数据分片,单机容量即为整个集群的容量

4、主从复制的使用场景

(1)数据备份和恢复:通过从节点备份主节点的数据,实现数据备份。

(2)读写分离:主节点承担写操作或部分读操作,从节点执行读操作,减轻主节点压力,提高系统性能

(3)提高可扩展性:在不影响主节点的情况下,通过增加从节点来扩展系统的读取能力。

5、总结

主从复制模式适合数据备份和恢复、读写分离和平滑扩展等场景,但在主节点故障时需要手动切换,不能自动实现故障转移,我们以后在讲到哨兵(sentinel)模式的时候,会发现可以用sentinal来实现这一点,从而实现更高的可用性。


相关推荐

数据中台与业务中台总体技术架构设计方案

《数据中台与业务中台总体技术架构设计方案》提出**“开放、稳定、滋养”三原则**,强调通过统一技术架构与框架破除烟囱式系统,构建**“业务中台+数据中台”闭环体系**。方案主张从单体架...

三分钟摸清楚什么叫前后端分离(什么是前后端分离架构?)

什么叫前后端分离?其实,前后端分离的初衷是为了分离前后端开发人员的职责,解决开发模式的问题。说到底,前后端分离就是将前端视图和后端数据进行分离,这样,后端只需要提供接口(后端数据)给前端,而前端也可以...

刚刚,给学妹普及了登录的两大绝学

今天跟大家聊一个比较基础的话题,就是实现登录的方式有哪些?适合刚入行的朋友。华山之Session绝学Session我们称之为会话控制,是一种在服务器端保持会话状态的解决方案。通俗点来讲就是客户...

6种微服务RPC框架,你知道几个?(grpc是微服务框架吗)

开源RPC框架有哪些呢?一类是跟某种特定语言平台绑定的,另一类是与语言无关即跨语言平台的。跟语言平台绑定的开源RPC框架主要有下面几种。Dubbo:国内最早开源的RPC框架,由阿里巴巴公司...

微服务中,Spring Cloud 有哪些注册中心?

SpringCloud是微服务架构中经常使用的一个框架,它提供了一系列工具来帮助开发者构建和管理分布式系统,而服务注册中心又是微服务架构中一个关键组件。那么,SpringCloud支持哪些注册...

Eureka的自我保护机制(eureka自我保护机制原理)

最近遇到一个问题,服务之间调用报错,显示无法路由到指定服务,但是对应的服务是启动的,查询eureka,结果eureka上显示如下,所有实例均消失,我个人对注册中心并没有什么研究,进行正好借此机会简单总...

eureka、zookepeer、nacos的区别(eureka和nacos哪个更好)

前言随着微服务被各大企业应用在项目中,微服务的框架也被更多人学习和使用,但是大部分情况下都是停留在应用层。一、演变过程1.1服务注册和发现基本概念服务注册:将某个或者某些服务的信息(模块的ip和...

40K+Star!Mall电商实战项目开源,附源码、教程合集

最近看了下我的Github,发现mall项目已经突破40K+Star,有点小激动!记得去年8月的时候mall项目刚过20K+Star,时隔1年多已经增长到了40K+Star。今天跟大家聊聊mall项目...

SpringCloud 常见注册中心的比较(springcloud注册过程)

一、概述springcloud是一个非常优秀的微服务框架,要管理众多的服务,就需要对这些服务进行治理,也就是我们说的服务治理,服务治理的作用就是在传统的rpc远程调用框架中,管理每个服务与每个服务之间...

简单介绍Nacos服务注册中心(nacos注册中心有什么用)

Nacos是阿里开源的一个新框架,在分布式的架构中,Nacos同时扮演着服务注册中心和配置中心的角色。今天主要讲的是Nacos作为服务注册中心。分布式中著名的CAP理论,任何一种服务注册中心都只能实现...

入门注册中心——consul(注册中心怎么注册)

基础概念什么是注册中心随着微服务理论发展的成熟,越来越多互联网公司采用微服务架构来支持业务发展。各个微服务之间都需要通过注册中心来实现自动化的注册和发现。注册中心主要有三种角色:服务提供者(RPCS...

08 Eureka的基础知识(eureka replication)

Eureka是Netflix开发的服务发现框架,SpringCloud将它集成在自己的子项目spring-cloud-netflix中,实现SpringCloud的服务发现功能。上图简要描述了Eur...

微服务架构中的服务注册与发现有哪些?Zookeeper、Eu

“大家好,我是码哥,《Redis高手心法》作者,本章节选自《Java面试高手心法58讲》专栏。随着单体应用的拆分,我们面临的首要问题就是采用哪种方式实现服务间的调用,像之前单体应用可能直接在配...

Eureka 都挂了,微服务还能调通吗?

如果你做过微服务开发,这个面试题应该能够立马答出来,如果你没做过微服务开发,但是学过一些SpringCloud组件的用法,这个问题可能要稍微想一下,但是也应该能够答出来。今天就来和大家说说这个问...

ZooKeeper、Eureka、Consul 、Nacos微服务注册中心对比

注册中心前言服务注册中心本质上是为了解耦服务提供者和服务消费者。对于任何一个微服务,原则上都应存在或者支持多个提供者,这是由微服务的分布式属性决定的。更进一步,为了支持弹性扩缩容特性,一个微服务的提供...