分布式与一致性协议之Raft算法(四)

Raft算法

Raft是如何解决成员变更问题的

在日常工作中,你可能会遇到服务器故障的情况,这时你需要替换集群中的服务器。如果遇到需要改变数据副本数的情况,则需要增加或移除集群中的服务器。总的来说,在日常工作中,集群中的服务器数量是会发生变化的。也许你会问,Raft算法是共识算法,它对集群成员进行变更时(比如增加2台服务器),会不会因为集群分裂出现两个领导者呢?在我看来,的确会出现这个问题,因为Raft算法的领导者选举是建立在"大多数"的基础之上,那么当成员变更,集群成员发生变化时,就可能同时存在新旧配置的两个"大多数",出现两个领导者,从而破坏了Raft集群的领导者唯一性,影响了集群的运行。成员变更不仅是Raft算法中比较难理解也非常重要的一部分,而且是Raft算法中唯一被优化和改进的部分。比如,最初成员变更的是联合共识(Joint Consensus),但这个方法实现起来很难,后来Raft算法的作者就提出了一种改进后的方法,单节点变更(single-server change).

在分析之前,我们先介绍以下"配置"这个词。配置是成员变更中一个非常重要的概念,可以这样理解:配置用于说明集群由哪些节点组成,是集群各节点地址信息的集合。比如节点A、B、C组成的集群配置就是【A,B,C】集合。
假设有一个由节点A、B、C组成的Raft集群,现在我们需要增加数据副本数。即增加两个副本(也就是增加两台服务器),扩展为由节点A、B、C、D、E这5个节点组成的新集群,如图所示。那么在集群配置变更时,Raft算法是如何保障集群稳定运行,而不出现两个领导者呢?老话说的好,认识问题,才能解决问题。为了更好地理解单节点变更地方法,我们先来看一看成员变更时到底会出现什么样的问题
在这里插入图片描述

成员变更问题

在我看来,上图所示的集群中进行成员变更的最大风险是,可能会同时出现两个领导者。比如在进行成员变更时,节点A、B、C之间发生了分区错误,节点A、B组成旧配置中的"大多数",也就是变更前的3节点集群中的"大多数",那么这时的领导者(节点A)依旧是领导者。然后,节点C和新节点D、E组成了新配置的"大多数",也就是变更后的5节点集群中的"大多数",它们可能会选举出新的领导者(比如节点C)。那么这时旧出现了同时存在两个领导者的情况,如图所示
在这里插入图片描述

两个领导者违背了"领导者的唯一性"的原则,进而影响到集群的稳定运行。如何解决这个问题呢?也许有人想到下面这种解决办法。
集群在启动时的配置是固定的,不存在成员变更,此时,Raft算法的领导者选举能保证只有一个领导者,也就是说,这时不会出现多个领导者的问题,那么我们是否可以先将集群关闭再启动新集群,即先关闭节点A、B、C组成的集群,待成员变更后,再启动由节点A、B、C、D、E组成的新集群?
在我看来,这个方法不可行。为什么呢?因为每次变更都要重启集群,意味着在集群变更期间服务不可用,这势必会影响用户体验。想象以下,你正在玩王者荣耀,但时不时会受到系统弹出的对话框,通知你,系统升级,游戏暂停3分钟。这种体验糟糕不糟糕?既然这种办法影响用户体验,根本行不通,那应该怎样解决成员变更的问题呢?最常用的方法就是单节点变更。

注意。
成员变更的问题主要在于成员变更时,可能存在新旧配置的两个"大多数",导致集群中同时出现两个领导者,破坏了Raft算法的领导者的唯一性原则,影响了集群的稳定运行

如何通过单节点变更解决成员变更问题

单节点变更就是通过一次变更一个节点实现成员变更。如果需要变更多个节点,则需要执行多次单节点变更。比如在将3节点集群扩容为5节点集群时,你需要执行两次单节点变更,先将3节点集群变更为4节点集群,再将4节点集群变更为5节点集群,如图所示。
在这里插入图片描述

让我们回到前面的思考题,看看如何通过单节点变更的方法解决成员变更的问题。为了演示方便,我们假设节点A是领导者,如图所示。
在这里插入图片描述

目前的集群配置为【A,B,C】,我们先向集群中加入节点D,这意味着新配置为【A,B,C,D】。具体实现步骤如下:

  • 1.第一步,领导者(节点A)向新节点(节点D)同步数据
  • 2.第二步,领导者(节点A)将新配置【A,B,C,D】作为一个日志项复制到新配置中的所有节点(节点A、B、C、D)上,然后将新配置的日志项应用到本地状态机,完成单节点变更,如图所示。
    在这里插入图片描述

变更完成后,集群配置变为【A,B,C,D】,我们再向集群中加入节点E,也就是说,新配置为【A,B,C,D,E】。具体实现步骤与上面类似。

  • 1.第一步,领导者(节点A)向新节点(节点E)同步数据
  • 2.第二步,领导者(节点A)将新配置【A,B,C,D,E】作为一个日志项复制到新配置中的所有节点(A、B、C、D、E)上,然后将新配置的日志项应用到本地状态机,完成单节点变更,如图所示。在这里插入图片描述
    在这里插入图片描述

这样一来,我们就通过一次变更一个节点的方式完成了成员变更,保证了集群中始终只有一个领导者,也保证了集群稳定运行,持续提供服务。
在正常情况下,不管旧的集群配置是怎么组成的,旧配置的"大多数"和新配置的"大多数"都会有一个节点是重叠的。也就是说,不会同时存在旧配置和新配置两个"大多数"。
如果你遇到这种情况,可以在领导者启动时创建一个NO_OP日志项(也就是空的日志项),当领导者应用该NO_OP日志项后,再执行成员变更请求。具体实现可参考Hashicorp Raft的源码,也就是runLeader()函数,代码如下:

noop :=&logFuture{
log: Log{
Type:LogNoop,
},
}
r.dispatchLogs([*logFuture{noop}])

当然,有的人会好奇"联合共识",在我看来,联合共识难以实现,很少被Raft算法采用。比如,除了Logcabin外,目前还没有其他常用Raft算法采用这种方式。

注意。
因为联合共识实现起来复杂,所以绝大多数Raft算法采用的都是单节点变更的方法(比如Etcd、Hashicorp Raft),其中,Hashicorp Raft单节点变更的实现是由Raft算法的作者迭戈安加罗(Diego Ongaro)设计的,很有参考价值

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/586900.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

进一步了解android studio 里 AGP,gradle等关系

目录 (1) gradle是什么 (2) 工程的jdk版本,及引用包的编译版本的关系 实践 问题与解决 编译成功与运行成功 编译成功 运行成功 (1) gradle是什么 Gradle是一个构建工具,它是…

Mac 版 安装NVM

优质博文IT-BLOG-CN NVM(Node Version Manager)是一个用于管理多个Node.js版本的工具。它允许开发者在同一台机器上安装和切换不同版本的Node.js,以便在不同的项目中使用不同的Node.js版本。macOS用户可以使用homebrew来安装NVM。 一、安装h…

Swagger3.0(Springdoc)日常使用记录

文章目录 前言一、默认地址二、注解OperationTag 三、SpringBoot基础配置四、Swagger导入apifox五、Swagger其他配置六 knife4j 参考文章 前言 本文并不是Swagger的使用教程,只是记录一下本人的操作,感兴趣的可以看下 一、默认地址 http://localhost:…

Scala 多版本下载指南

Scala,这一功能丰富的编程语言,结合了面向对象和函数式编程的精华,为开发者提供了强大的工具来构建高效、可扩展的应用程序。随着Scala社区的不断壮大和技术的演进,多个版本的Scala被广泛应用于不同的项目与场景中。本文旨在为您提…

Redis集群模式:高可用性与性能的完美结合!

【更多精彩内容,欢迎关注小米的微信公众号“软件求生”】 大家好,我是小米,一个积极活泼、喜好分享技术的29岁程序员。今天我们来聊聊Redis的集群模式,以及它是如何实现高可用的。 什么是Redis集群模式? Redis的集群模式是为了避免单一节点负载过高导致不稳定的一种解决…

Rust Web开发实战:构建高效稳定的服务端应用

如果你厌倦了缓慢、占用大量资源且不稳定的模板化Web开发工具,Rust就是你的解决方案。Rust服务提供了稳定的安全保证、非凡的开发经验,以及能够自动防止常见错误的编译器。 《Rust Web开发》教你使用Rust以及重要的Rust库(如异步运行时的Tokio、用于Web…

3.C++动态内存管理(超全)

目录 1 .C/C 内存分布 2. C语言中动态内存管理方式:malloc/calloc/realloc/free 3. C内存管理方式 3.1 new/delete操作内置类型 3.2 new和delete操作自定义类型 3.3 operator new函数 3.4 定位new表达式(placement-new) (了解) 4. 常…

公共 IP 地址与私有 IP 地址区别有哪些?

​  IP 地址是分配给互联网上每个设备的唯一数字 ID。 IP 地址可以在 Internet 上公开使用,也可以在局域网 (LAN)上私有使用。本文,我们主要探讨公共 IP 地址和私有 IP 地址之间的区别。 公共IP地址:公共IP地址是用于访问Internet的向外的I…

极简shell制作

🌎自定义简单shell制作 (ps: 文末有完整代码) 文章目录: 自定义简单shell制作 简单配置Linux文件 自定义Shell编写 命令行解释器       获取输入的命令       字符串分割       子进程进行进程替换 内建命令…

WebP格式:图片压缩的新标准

🤍 前端开发工程师、技术日更博主、已过CET6 🍨 阿珊和她的猫_CSDN博客专家、23年度博客之星前端领域TOP1 🕠 牛客高级专题作者、打造专栏《前端面试必备》 、《2024面试高频手撕题》 🍚 蓝桥云课签约作者、上架课程《Vue.js 和 E…

qcheckbox互斥 也就是单选 纯代码实现 没有ui界面转到槽

1.init()函数把所有的qcheckbox找到,然后通过信号与槽,做到点击哪个qcheckbox,哪个qcheckbox就发出信号 2.checkchange()槽函数,通过42行拿到是哪个qcheckbox发出的信号&#xff0c…

Kubernetes 弃用Docker后 Kubelet切换到Containerd

containerd 是一个高级容器运行时,又名 容器管理器。简单来说,它是一个守护进程,在单个主机上管理完整的容器生命周期:创建、启动、停止容器、拉取和存储镜像、配置挂载、网络等。 containerd 旨在轻松嵌入到更大的系统中。Docke…

Python 深度学习(三)

原文:zh.annas-archive.org/md5/98cfb0b9095f1cf64732abfaa40d7b3a 译者:飞龙 协议:CC BY-NC-SA 4.0 第八章:深度学习与电脑游戏 上一章关注的是解决棋盘游戏问题。在本章中,我们将研究更复杂的问题,即训练…

深入探究C++四大关键特性:初始化列表、友元函数、内部类与static成员

目录 1. 构造函数不为人知的那些事 1.1 构造函数体赋值与初始化列表对比 1.2 explicit关键字与构造函数隐式转换 2. static成员 2.1 static成员的概念 2.2 static成员的特性与应用 2.3 小结 3. C11 成员变量初始化新用法 4. 友元 4.1 友元函数 4.2 友元类 5. 内部类…

Python 深度学习(一)

原文:zh.annas-archive.org/md5/98cfb0b9095f1cf64732abfaa40d7b3a 译者:飞龙 协议:CC BY-NC-SA 4.0 序言 随着全球对人工智能的兴趣不断增长,深度学习引起了广泛的关注。每天,深度学习算法被广泛应用于不同行业。本书…

QT - 创建Qt Widgets Application项目

在Qt中结合OpenGL使用,可以创建一个Qt Widgets应用程序项目。在创建项目时,您可以选择使用OpenGL模板来生成一个已经集成了OpenGL的项目。这个模板会自动帮助您集成OpenGL和Qt,并生成一个基本的OpenGL窗口。您可以在这个窗口中进行OpenGL的开…

vue快速入门(四十七)路由基本用法

注释很详细,直接上代码 上一篇 新增内容 路由基本用法多级路由方法演示路由样式修改示范路由默认页面写法路由默认样式名修改方法路由高亮的两种匹配方法解析 源码 src/router/index.js //导入所需模块 import Vue from "vue"; import VueRouter from &q…

高级变换与动画基础

1、平移+旋转 1.1 矩阵变换库cuon-matrix.js OpenGL提供了一系列有用的函数来帮助我们创建变换矩阵。例如,通过调用glTranslate()函数并传入在X,Y,Z轴上的平移距离,就可以创建一个平移矩阵。 glTranslatef(5,80,30) ==》 WebGL没有提供类似的矩阵函数,因此,如果想要使用…

【web安全】-- 命令执行漏洞详解

本文将从原理开始介绍命令执行漏洞并附有三个实例来供各位客官学习 文章目录 一、什么是命令执行漏洞二、出现的原因三、有可能存在命令执行漏洞的函数(php)1、利用一些函数来实现命令执行2、直接执行系统命令的函数 四、命令拼接符号1、Windows2、linux…

亿图图示使用教程

亿图图示是一款强大的图形绘制工具,可以用于创建流程图、思维导图、组织结构图等多种类型的图表。下面是一些基本的使用教程: 下载和安装:首先,你需要在官方网站上下载亿图图示的安装包,然后按照提示进行安装。 新建项…