“深入探讨Redis主从复制:原理、配置与优化“

目录

# 概念

1. 配置主从同步步骤

1.1 创建文件夹

1.2 复制配置文件

1.3 配置文件关闭

1.4 查看端口号,发现端口号存在

1.5 连接三个端口号

1.6 查看主机运行情况

1.7 让服务器变成(主机)或(从机)

1.8 实现效果

2. 主从复制(一主二仆)的特点

2.1 从服务器挂掉重启后并没有变成从机而是成为了主机

2.2 主从复制原理

2.3 薪火相传和反客为主

3. 哨兵模式(sentinel)

3.1 创建哨兵文件

3.2 配置哨兵

3.3 启动哨兵

4. 主从复制概念流程

4.1 主从复制的基本概念

4.2 主从复制的工作流程

4.3 主从复制的示例配置

4.4 参考示意图

5. 主从复制的优缺点

6. 主从复制的应用场景


# 概念

  • 概念

    主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主;

    实现:读写分离;性能扩展;容灾快速恢复;

  1. 主从复制:主机挂掉,从机不上位
    • 这种情况通常说明缺少故障转移机制。仅靠 Redis 主从复制,不会自动进行主从切换。在没有哨兵或其他协调机制的情况下如果主机(主节点)挂掉,从机(从节点)不会自动升级为主节点
  2. 从机挂掉重启后的行为
    • 如果 Redis 的从节点挂掉并重启,它会尝试重新连接到当前的主节点。如果主节点仍然是原来的主节点从节点会继续作为从节点。如果原主节点已挂掉且有故障转移机制(如 Redis Sentinel)新的主节点会替代旧主节点从节点重启时会连接到新的主节点并同步数据
    • 从节点(Slave)在挂掉后重启,不会自动变成主节点(Master)。它会继续作为从节点存在,并尝试重新连接并同步主节点的数据。这个行为在 Redis 主从复制和哨兵模式下均为默认行为。
  3. 哨兵模式
    • Redis Sentinel 监控主节点和从节点的状态。哨兵集群可以自动检测主节点的故障,并通过投票机制选举一个从节点作为新的主节点。同时,它们会通知其他从节点和客户端关于新主节点的信息。这实现了自动化的主从切换(即故障转移)。

1. 配置主从同步步骤

1.1 创建文件夹

1.2 复制配置文件

在三个文件中写入内容

直接复制并修改配置文件中的6379分别为6379、6380、6381(三个地方的值都修改)

1.3 配置文件关闭

1.4 查看端口号,发现端口号存在

1.5 连接三个端口号

(三个连接都是同样操作)

通过端口号连接上服务器:redis-cli -p 6379、redis-cli -p 6380 、redis-cli -p 6381

连接成功:

1.6 查看主机运行情况

查看三台主机运行情况(没有设置都是主机,没有从机);

此时我们并没有配置谁是从服务器,都是主服务器,所以需要配置一下;

info replication :打印主从复制的相关信息;

可以看到当前的6379服务是一个主机master;

1.7 让服务器变成(主机)或(从机)

使用命令使6380和6381变成从机;

成为某个实例的从服务器:slaveof <ip> <port>

在6380和6381上都执行:slaveof 127.0.0.1 6379

成功后查看 6381 变成了slave从机:

在6379服务中查看,它是master主机:

实现一主二从:

  • 此操作完成后,他们就变成了主从关系,主机通过写入时同时主机也会把数据复制到从机中,读取的时候读的是从机的信息。(主机只用写,从机只用读)
  • (一主两从)代表的是主机可以写入数据的同时把数据也复制一份到他下面的从机中(从机可以有多个),从机也可以查到主机写入的值

1.8 实现效果

主机写入:

从机读取:

2. 主从复制(一主二仆)的特点

2.1 从服务器挂掉重启后并没有变成从机而是成为了主机

  • 从服务器在重启后有可能会成为主服务器的情况:
    • 哨兵(Sentinel)故障转移:当主服务器(Master)宕机时,Redis Sentinel 进行故障转移(Failover),选举一个从服务器(Slave)为新的主服务器。如果该从服务器重新启动,可能会继续作为新的主服务器,尤其是在它已经被选为主服务器之前。
    • 没有正确配置从服务器:如果从服务器重启后没有正确配置为从服务器(Replica),或者在重启时无法连接到指定的主服务器,它可能会以独立的主服务器启动。

特点一:

如果又继续把他变成6379的从服务器,那么他会把他挂掉之前的数据全部一个个的复制过来。

所以当他又变成从服务器的时候,他又会有了主机复制的数据;

特点二:

当主服务器挂掉的时候,从服务器并不会上位,还是原来的从服务器;

2.2 主从复制原理

  1. 当从连接上主服务器之后,从服务器向主服务发送进行数据同步消息;
  2. 主服务器接到从服务器发送过来同步消息,把主服务器数据进行持久化rdb文件,把rdb文件发送从服务器,从服务器拿到rdb进行读取;
  3. 每次主服务器进行写操作之后,和从服务器进行数据同步;
    • 不过从服务器只会在第一次连接主服务器的时候发起同步消息,当连接后,都是主服务器主动发起请求给从服务器,进行复制同步rbd数据;

2.3 薪火相传和反客为主

1. 薪火相传概念及缺点:

缺点:当从服务器挂掉之后,主服务器无法直接连接从机下的从机;

类似管理层职位划分,当人的数量变多了,这会变得不好管理,这时就会分出小组长去管理其他人,以此类推;

2. 反客为主:

当一个master宕机后,后面的slave可以立刻升为master,其后面的slave不用做任何修改;

slaveof no one :将从机变为主机;

  • 场景:

    当发布上线的服务器挂掉之后,我们程序员需要手动的去操作,执行命令,这个也需要一段时间;

  • 缺点:

    手动操作;

    耗时;

3. 哨兵模式(sentinel)

  • (哨兵模式与主从复制关联:当配置了哨兵之后,那么当主服务器挂掉之后,哨兵立马顶上,且哨兵也可以配置多个)

  • 概念

    反客为主的自动版,能够后台监控主机是否故障,如果故障了根据投票数自动将从库转换为主库;

3.1 创建哨兵文件

myredis是创建服务器的时候,自己创建的一个文件,里面放的是redis配置文件;

进入myredis文件,创建sentinel.conf;

3.2 配置哨兵

  • 在哨兵文件中写入sentinel monitor mymaster 127.0.0.1 6379 1
  • 其中mymaster为监控对象起的服务器名称,1为至少有多少个哨兵同意迁移的数据;
  • 1数量代表有1个哨兵同意切换,为2就是有两个哨兵同意切换才能切换。

我如何知道哨兵有几个同意我迁移的?

        在Redis的哨兵模式中,当主节点出现故障时,哨兵会选举一个新的主节点并进行迁移。在迁移过程中,哨兵需要确保有足够的从节点同意迁移才能进行。

在默认情况下,哨兵模式中至少需要有一半以上的从节点同意迁移才能进行。这个比例可以通过配置文件中的quorum参数进行设置,默认值为2(即至少需要2个从节点同意迁移)。

如果你想要知道当前哨兵模式中有多少个从节点同意迁移,可以使用Redis的命令SENTINEL sentinels <master-name>来获取哨兵的信息。其中<master-name>是主节点的名称。

命令的返回结果中会包含一个num-slaves字段,表示有多少个从节点,以及一个num-other-sentinels字段,表示有多少个其他哨兵节点。通过计算num-slavesnum-other-sentinels的和,再与quorum进行比较,就可以知道有多少个从节点同意迁移。

3.3 启动哨兵

  • 当我们的主机挂掉之后,这时候从机就可以自动上位了,这时候之前的主机,就变成了当前主机的从机了;(老主机就变成了新上位主机的从机了)
  • 其它从机也隶属于当前新主机了;
  • redis-sentinel sentinel.conf :Sentinel 的启动与使用;

  • 作用:

    高可用性:在 Redis 主节点失效时,自动将一个从节点提升为新的主节点,确保服务可用性。

    监控:监控 Redis 主从结构的健康状态,并在问题发生时通知管理员。

    自动修复:执行自动故障转移和配置修复,减少手动干预。

从机的优先级:

        在 Redis Sentinel 进行故障转移时,从机(slave,或 replica)的优先级影响它们被提升为主机(master)的顺序。Redis 使用一个叫做replica-priority的参数来决定哪个从机有更高的优先级。了解和配置这个优先级参数可以帮助控制从机在故障转移中的选择顺序......

4. 主从复制概念流程

        Redis 主从复制(Master-Slave Replication)是 Redis 用于实现数据分发和高可用性的核心机制。它允许一个 Redis 实例(主机,Master)自动将数据复制到一个或多个 Redis 实例(从机,Slave),从而实现读写分离和数据冗余。下面是主从复制的概念和流程的详细说明。

4.1 主从复制的基本概念

  1. 主机(Master):
    • 处理所有的写请求和修改数据的操作。
    • 将数据变更传播给从机。
  2. 从机(Slave):
    • 从主机同步数据。
    • 通常处理只读请求,减轻主机的负载。
    • 可以被配置为其他从机的主机,形成级联复制。
  3. 全量复制:
    • 从机第一次连接主机或与主机数据差异过大时进行。
    • 发送整个数据快照(RDB 文件)给从机。
  4. 部分复制:
    • 用于同步期间的增量数据变化。
    • 通过复制流(replication stream)将新命令发送给从机。

4.2 主从复制的工作流程

  1. 配置从机:

    • 在从机的配置文件 redis.conf 中指定主机的 IP 和端口,或者使用 SLAVEOF 命令动态配置。
    • 配置文件方式
      replicaof 192.168.1.1 6379

    • 命令方式:
      redis-cli SLAVEOF 192.168.1.1 6379

  2. 初次同步(全量复制):

    • 从机连接主机,发送 PSYNC 命令。
    • 如果是第一次同步或主从数据差异过大,主机生成 RDB 快照。
    • 主机将 RDB 文件发送给从机。
    • 从机载入 RDB 文件以获得主机的完整数据快照。
  3. 增量复制(部分复制):

    • 主机发送从 PSYNC 开始以来的所有写操作命令(即复制流)给从机。
    • 从机将这些命令应用到本地数据中,保持与主机数据一致。
  4. 复制流和心跳机制:

    • 主机持续向从机发送命令流保持数据同步。
    • 主机和从机之间定期发送 PING/PONG 命令确保连接健康。
  5. 故障恢复:

    • 如果从机断开连接,在重新连接后会尝试部分同步,尽量恢复增量数据。
    • 如果部分同步失败(例如,主机的复制缓冲区数据丢失),将重新进行全量同步。

4.3 主从复制的示例配置

主机配置(master.conf):

port 6379
# 其他主机配置

从机配置(slave.conf):

port 6380
replicaof 127.0.0.1 6379

4.4 参考示意图

基本架构图:

5. 主从复制的优缺点

优点:

  • 读写分离: 减轻主机负载,提高读性能。
  • 数据冗余: 提高数据的可靠性。
  • 扩展性: 通过增加从机进行水平扩展。

缺点:

  • 一致性问题: 复制过程中存在延迟,可能导致短暂的不一致。
  • 故障处理: 如果主机故障,需要手动或借助 Sentinel 执行故障转移。
  • 复制延迟: 由于所有的写操作都是先在 Master 上操作,然后同步更新到 slave 上,所以从 Master同步到 slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,slave机器数量的增加也会使这个问题更加严重。

6. 主从复制的应用场景

  • 分布式缓存: 在大型分布式系统中,通过增加从机来处理高并发读请求。
  • 数据备份: 通过从机进行数据异地备份,提高数据可靠性。
  • 读写分离架构: 实现读写分离,提高系统整体性能和可用性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/717674.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

关于禁止word的无用插入模式

这是我的word版本号 点击左上角文件选项 找到左侧最下方的选项 点击高级 把这两个叉掉

ssm宠物网站系统-计算机毕业设计源码07183

摘 要 在信息飞速发展的今天&#xff0c;网络已成为人们重要的信息交流平台。宠物网站每天都有大量的信息需要通过网络发布&#xff0c;为此&#xff0c;本人开发了一个基于B/S&#xff08;浏览器/服务器&#xff09;模式的宠物网站系统。 该系统以JJava编程语言、MySQL和SSM框…

2024年6月17日 (周一) 叶子游戏新闻

期刊杂志: 聚合读者、意林、知音、故事会、花火以及国内各大知名报纸电子版&#xff0c;无需付费即可观看各种免费资源 中医自学宝典: 集合了中医医案&#xff0c;医经&#xff0c;方剂 药材知识的app&#xff0c;更方便的免费学习中医知识 《最终幻想7》重制三部曲总监鸟山求&…

指定导师申请成功|普通高校教师省公派英国曼彻斯特大学访学交流

Q老师的预期目标是世界排名Top100高校&#xff0c;且提供了心仪课题组的导师名单&#xff0c;希望借助我们丰富的资源和专业的申请经验&#xff0c;实现既定目标。我们没有辜负其委托&#xff0c;落实了美国加州大学洛杉矶分校和英国曼彻斯特大学访问学者职位&#xff0c;而曼大…

【自动驾驶】ROS小车系统介绍

文章目录 小车组成轮式运动底盘的组成轮式运动底盘的分类轮式机器人的控制方式感知传感器ROS决策主控ROS介绍ROS的坐标系ROS的单位机器人电气连接变压模块运动底盘的电气连接ROS主控与传感器的电气连接运动底盘基本组成电池电机控制器与驱动器控制器与运动底盘状态数据&#xf…

大学课设项目,Windows端基于UDP的网络聊天程序的服务端和客户端

文章目录 前言项目需求介绍一、服务端1.对Udp套接字进行一个封装2. UdpServer的编写3. Task.h4.protocol.h的编写5.线程池的编写6.main.cc 二、客户端1. Socket.h2.protocol.h3.UdpClient4.menu.h5.main.cpp 三、运行图 前言 本次项目可以作为之前内容的一个扩展&#xff0c;学…

汇聚荣拼多多运营策略是怎么样的?

拼多多作为中国领先的电商平台&#xff0c;其运营策略一直备受关注。拼多多的成功不仅在于其创新的“社交电商”模式&#xff0c;更在于其精细化的市场定位和高效的用户增长策略。本文将深入分析拼多多的运营策略&#xff0c;探讨其如何在激烈的电商竞争中突围而出。 一、用户增…

Vue3-滑动到最右验证功能

1、思路 1、在登录页面需要启动向右滑块验证 2、效果图 3、文章地址&#xff1a;滑动验证码的实现-vue-simple-verify 2、成分分析 1、由三块构成&#xff0c;分别是底部条、拖动条、拖动移动部分 2、底部条&#xff1a;整体容器&#xff0c;包括背景、边框和文字&#xf…

企业级Flask项目移植记录【待补完】

背景 Flask项目A从老电脑C1移植到新电脑C2上 更新日志 1-240614上线第一版经验&#xff0c;博主关于这个项目包的问题还没有解决&#xff0c;正在解决中&#xff0c;但是整体思路大家在移植的时候可以借鉴。 思路 1-首先生产环境的python解释器等相关的东西最好严格保持一…

基于自编码器的心电信号异常检测(Pytorch)

代码较为简单&#xff0c;很容易读懂。 # Importing necessary libraries for TensorFlow, pandas, numpy, and matplotlib import tensorflow as tf import pandas as pd import numpy as np import matplotlib.pyplot as plt import copy# Importing the PyTorch library im…

项目管理进阶之EVM(挣值管理)

前言 项目管理进阶系列&#xff0c;终于有时间更新啦&#xff01;&#xff01;&#xff01;欢迎持续关注哦~ 上一节博主重点讲了一个环&#xff1a;PDCA&#xff0c;无论各行各业&#xff0c;上到航空航天、下到种地种菜&#xff0c;都离不开对质量的监督和改进。这个环既是一…

轻松4步!格式工厂怎么转换mp3教会你

在数字化时代&#xff0c;音频文件格式转换变得越发重要&#xff0c;而格式工厂作为一款强大而多功能的工具&#xff0c;为我们提供了便捷的音频转换解决方案。特别是在将音频文件转换为MP3的需求上&#xff0c;格式工厂以其简便易用的特点备受欢迎。格式工厂怎么转换mp3&#…

力扣172. 阶乘后的零

Problem: 172. 阶乘后的零 文章目录 题目描述思路及解法复杂度Code 题目描述 思路及解法 1.要使得末尾出现0&#xff0c;则乘式中必须出现因子2与5&#xff1b; 2.而由于对于一个数的阶乘&#xff0c;易知因子2的个数是大于因子5的个数&#xff08;因为只要出现偶数则可以分解出…

好的品牌营销策划方案需包含哪些?

现在很多企业家和创业者&#xff0c;对品牌营销知之甚少。作为一个多年的老营销人&#xff0c;可以来谈谈我们写一个品牌方案一般包含哪些内容。 首先&#xff0c;我们必须认识到&#xff0c;品牌策划的第一步其实是市场调研。 这不仅仅是对企业的简单了解&#xff0c;更包括…

计数排序(Counting Sort)

计数排序&#xff08;Counting Sort&#xff09; 计数排序是一个非基于比较的排序算法&#xff0c;该算法于1954年由 Harold H. Seward 提出。它的优势在于在对一定范围内的整数排序时&#xff0c;快于任何比较排序算法。排序思路: 1.找出待排序数组最大值2.定义一个索引最大…

鸿蒙: 基础认证

先贴鸿蒙认证 官网10个类别总结如下 https://developer.huawei.com/consumer/cn/training/dev-cert-detail/101666948302721398 10节课学习完考试 考试 90分合格 3次机会 1个小时 不能切屏 运行hello world hvigorfile.ts是工程级编译构建任务脚本 build-profile.json5是工程…

裁剪图片的最简单方法?这四种裁剪方法真的超级简单!

裁剪图片的最简单方法&#xff1f;在丰富多彩的现代生活中&#xff0c;图片成为了我们表达、沟通甚至展示身份的重要媒介&#xff0c;然而&#xff0c;无论是出于个人审美还是专业需求&#xff0c;图片的格式和尺寸往往成为了我们不得不面对的问题&#xff0c;特别是那些未经雕…

小孟再接盲盒小程序,3天开发完!

大家好&#xff0c;我是程序员小孟。 前面开发了很多的商业的单子&#xff0c;私活联盟的小伙伴慢慢的逐渐搞自己的产品。 前面的话&#xff0c;开发了盲盒小程序&#xff0c;最近又接了一款盲盒小程序。因为前面有开发过&#xff0c;所以我们的成本也少了很多。 盲盒小程序…

2024年最佳插电式混合动力电动汽车

对电动汽车充满好奇和环保意识的司机们还没有准备好跨入纯电动汽车&#xff0c;他们可以找到一个折衷方案&#xff0c;即插电式混合动力车。 在过去的16年里&#xff0c;我一直在把握汽车行业的脉搏。试驾数百辆汽车、电动汽车、插电式混合动力车&#xff0c;跟踪汽车行业的新闻…

一行代码实现鼠标横向滚动

&#x1f9d1;‍&#x1f4bb; 写在开头 点赞 收藏 学会&#x1f923;&#x1f923;&#x1f923; 在项目中我们可能会遇到当鼠标在某个区域内&#xff0c;我们希望滚动鼠标里面的内容可以横向滚动&#xff1b; 比如我们一些常见的后台状态栏&#xff1a; 那这种该怎么写&…