【MySQL】基于GTID的半同步主从复制（实践）

在这里插入图片描述

一、GTID简介

什么是GTID?
全局事务标识符GTID的全称为Global Transaction Identifier，是在整个复制环境中对一个事务的唯一标识。

它是MySQL 5.6加入的一个强大特性，目的在于能够实现主从自动定位和切换，而不像以前需要指定文件和位置。

1、全局唯一，一个事务对应一个GTID
2、替代传统的binlog+pos复制；使用master_auto_position=1自动匹配GTID断点进行复制
3、MySQL5.6开始支持
4、在传统的主从复制中，slave端不用开启binlog；但是在GTID主从复制中，必须开启binlog
5、slave端在接受master的binlog时，会校验GTID值
6、为了保证主从数据的一致性，多线程同时执行一个GTID

二、工作原理

GTID长什么样子？

de35d2ef-cd37-11ed-93d8-000c2954bc91:1-4
uuid号：每个MySQL实例的唯一编号

使用GTID复制时，主库上提交事务时创建事务对应的GTID，从库在应用中继日志时用GTID识别和跟踪每个事务。在启动新从库或因故障转移到新主库时可以使用GTID来标识复制的位置，极大地简化了这些任务。
简而言之，在新的主从切换的时候，新的从服务器知道哪些事务已经做了，哪些没有做。

工作原理：

1、master更新数据时，会在事务前产生GTID，一同记录到binlog日志中。
2、slave端的i/o线程将变更的binlog，写入到本地的relay log中。
3、sql线程从relayog中获取GTID，然后对比slave端的binlog是否有记录。
4、如果有记录，说明该GTID的事务已经执行，slave会忽略。
5、如果没有记录，slave就会从relay log中执行该GTID的事务，并记录到binlog。
6、在解析过程中会判断是否有主键，如果没有就用二级索引，如果没有就用全部扫描

三、实践

查看master上的配置

[root@jd-mysql ~]# cat /etc/my.cnf
[mysqld_safe]

[client]
socket=/data/mysql/mysql.sock

[mysqld]
socket=/data/mysql/mysql.sock
port = 3306
open_files_limit = 8192
innodb_buffer_pool_size = 512M
character-set-server=utf8mb4
#skip-grant-tables

#二进制日志开启
log_bin
server_id = 1

#开启半同步，需要提前安装半同步的插件
rpl_semi_sync_master_enabled=1
rpl_semi_sync_master_timeout=1000 # 1 second

#gtid功能
gtid-mode=ON
enforce-gtid-consistency=ON

[mysql]
auto-rehash
prompt=\u@\d \R:\m  mysql>

改了配置，首先一定记得刷新服务！

[root@jd-mysql mysql]# service mysqld restart
Shutting down MySQL.. SUCCESS! 
Starting MySQL. SUCCESS!

配置slave的配置

[root@jd-mysql-2 ~]# cat /etc/my.cnf
[mysqld_safe]

[client]
socket=/data/mysql/mysql.sock

[mysqld]
socket=/data/mysql/mysql.sock
port = 3306
open_files_limit = 8192
innodb_buffer_pool_size = 512M
character-set-server=utf8

#log bin 二进制日志
log_bin
server_id = 2
#开启gtid功能
gtid-mode=ON
enforce-gtid-consistency=ON
log_slave_updates=ON
#开启半同步，需要提前安装半同步的插件
rpl_semi_sync_slave_enabled=1


[mysql]
auto-rehash
prompt=\u@\d \R:\m  mysql>

记得刷新服务！

[root@jd-mysql-2 mysql]# service mysqld restart
Shutting down MySQL.. SUCCESS! 
Starting MySQL. SUCCESS!

在master上新建一个授权用户，给slave来复制二进制日志

root@(none) 16:41  mysql>grant replication slave on *.* to 'jiangda'@'192.168.1.%' identified by 'Jiangda123#';
Query OK, 0 rows affected, 1 warning (1.01 sec)

在slave上配置master info的信息
CHANGE MASTER TO MASTER_HOST=‘192.168.1.150’ ,
MASTER_USER=‘jiangda’,
MASTER_PASSWORD=‘Jiangda123#’,
MASTER_PORT=3306,
master_auto_position=1;

root@(none) 16:43  mysql>stop slave;
Query OK, 0 rows affected (0.00 sec)

root@(none) 16:43  mysql>reset slave all;
Query OK, 0 rows affected (0.01 sec)

root@(none) 16:43  mysql>CHANGE MASTER TO MASTER_HOST='192.168.1.150' ,
    -> MASTER_USER='jiangda',
    -> MASTER_PASSWORD='Jiangda123#',
    -> MASTER_PORT=3306,
    -> master_auto_position=1;
Query OK, 0 rows affected, 2 warnings (0.01 sec)

root@(none) 16:43  mysql>start slave;
Query OK, 0 rows affected (0.00 sec)

root@(none) 16:43  mysql>show slave status\G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.1.150
                  Master_User: jiangda
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: jd-mysql-bin.000003
          Read_Master_Log_Pos: 450
               Relay_Log_File: jd-mysql-2-relay-bin.000002
                Relay_Log_Pos: 669
        Relay_Master_Log_File: jd-mysql-bin.000003
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: 
          Replicate_Ignore_DB: 
           Replicate_Do_Table: 
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: 
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 450
              Relay_Log_Space: 881
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 1
                  Master_UUID: de35d2ef-cd37-11ed-93d8-000c2954bc91
             Master_Info_File: /data/mysql/master.info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind: 
      Last_IO_Error_Timestamp: 
     Last_SQL_Error_Timestamp: 
               Master_SSL_Crl: 
           Master_SSL_Crlpath: 
           Retrieved_Gtid_Set: de35d2ef-cd37-11ed-93d8-000c2954bc91:1
            Executed_Gtid_Set: de35d2ef-cd37-11ed-93d8-000c2954bc91:1
                Auto_Position: 1
         Replicate_Rewrite_DB: 
                 Channel_Name: 
           Master_TLS_Version: 
1 row in set (0.00 sec)

ERROR: 
No query specified

在master上查看

root@(none) 16:42  mysql>show variables like "%semi_sync%";
+-------------------------------------------+------------+
| Variable_name                             | Value      |
+-------------------------------------------+------------+
| rpl_semi_sync_master_enabled              | ON         |
| rpl_semi_sync_master_timeout              | 1000       |
| rpl_semi_sync_master_trace_level          | 32         |
| rpl_semi_sync_master_wait_for_slave_count | 1          |
| rpl_semi_sync_master_wait_no_slave        | ON         |
| rpl_semi_sync_master_wait_point           | AFTER_SYNC |
+-------------------------------------------+------------+
6 rows in set (0.00 sec)

在slave上查看

root@(none) 16:43  mysql>show variables like "%semi_sync%";
+---------------------------------+-------+
| Variable_name                   | Value |
+---------------------------------+-------+
| rpl_semi_sync_slave_enabled     | ON    |
| rpl_semi_sync_slave_trace_level | 32    |
+---------------------------------+-------+
2 rows in set (0.00 sec)

验证GTID的半同步主从复制

在master上操作：

root@(none) 16:37  mysql>create database dada;
Query OK, 1 row affected (0.03 sec)

root@(none) 16:37  mysql>use dada;
Database changed
root@dada 16:38  mysql>create table t1(id int);
Query OK, 0 rows affected (0.02 sec)

root@dada 16:38  mysql>insert into t1(id) values(1),(2);
Query OK, 2 rows affected (0.10 sec)
Records: 2  Duplicates: 0  Warnings: 0

在slave上查看:

root@(none) 16:36  mysql>use dada;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
root@dada 16:38  mysql>show tables;
+------------------+
| Tables_in_dada |
+------------------+
| t1               |
+------------------+
1 row in set (0.01 sec)

root@dada 16:39  scmysql>select * from t1;
+------+
| id   |
+------+
|    1 |
|    2 |
+------+
2 rows in set (0.00 sec)

root@dada 16:44  mysql>show slave status\G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.1.150
                  Master_User: jiangda
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: jd-mysql-bin.000003
          Read_Master_Log_Pos: 1043
               Relay_Log_File: jd-mysql-2-relay-bin.000002
                Relay_Log_Pos: 1262
        Relay_Master_Log_File: jd-mysql-bin.000003
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: 
          Replicate_Ignore_DB: 
           Replicate_Do_Table: 
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: 
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 1043
              Relay_Log_Space: 1474
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 1
                  Master_UUID: de35d2ef-cd37-11ed-93d8-000c2954bc91
             Master_Info_File: /data/mysql/master.info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind: 
      Last_IO_Error_Timestamp: 
     Last_SQL_Error_Timestamp: 
               Master_SSL_Crl: 
           Master_SSL_Crlpath: 
           Retrieved_Gtid_Set: de35d2ef-cd37-11ed-93d8-000c2954bc91:1-4
            Executed_Gtid_Set: de35d2ef-cd37-11ed-93d8-000c2954bc91:1-4
                Auto_Position: 1
         Replicate_Rewrite_DB: 
                 Channel_Name: 
           Master_TLS_Version: 
1 row in set (0.00 sec)

ERROR: 
No query specified

四、总结

业务量小：推荐使用gtid的半同步主从复制，只要2~3台服务器
业务量大： 推荐使用组复制，至少3，5,7，9台服务器

但是当我们需要实现级联同步时，即以这样的一个模式，A>B>C实现三级同步时，AB库除了需要设置log-bin参数还需要添加一个参数：log-slave-updates

log-slave-updates参数默认时关闭的状态，如果不手动设置，那么bin-log只会记录直接在该库上执行的SQL语句，由replication机制的SQL线程读取relay-log而执行的SQL语句并不会记录到bin-log，那么就无法实现上述的三级级联同步。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/7644.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

ArduPilot飞控之DIY-F450计划

ArduPilot飞控之DIY-F450计划

ArduPilot飞控之DIY-F450计划1. 历史2. 源由3. 计划3.1 硬件3.2 软件4. 动手4.1 接线4.1.1 ELRS nano接收机4.1.2 BN880 GPS模块4.1.3 Radio Telemetry4.2 配置4.2.1 选择四轴机型4.2.2 电源参数调整4.2.3 校准加速度计4.2.4 校准磁力计4.2.5 遥控器校准4.2.6 电机设置4.2.7 电…
阅读更多...
企业电子招投标采购系统——功能模块功能描述+数字化采购管理 采购招投标

企业电子招投标采购系统——功能模块功能描述+数字化采购管理 采购招投标

​ 功能模块： 待办消息，招标公告，中标公告，信息发布 描述： 全过程数字化采购管理，打造从供应商管理到采购招投标、采购合同、采购执行的全过程数字化管理。通供应商门户具备内外协同的能力，为外…
阅读更多...
Melis4.0[D1s]:4.测试笔记 - 内嵌的显示命令

Melis4.0[D1s]:4.测试笔记 - 内嵌的显示命令

文章目录1.配置将显示测试源码包含进工程（默认是包含了）2.不要启动melis桌面系统3.开始测试3.1 disp 命令3.1.1 disp不带参数时，打印显示信息：3.1.2 disp -c 0 8 测试4种颜色3.2 disp_layer_cfg 命令3.3 disp_mem 对显示内存写入内…
阅读更多...
全球自动驾驶竞争力最新排行榜，4家中国企业上榜

全球自动驾驶竞争力最新排行榜，4家中国企业上榜

发展至今，自动驾驶技术不仅是汽车行业的一个主战场，更是全球科技领域中备受关注和充满竞争的一个重要领域。近年来，各大汽车制造商和科技公司都在投入大量财力物力人力进行自动驾驶技术的研发，并进一步争夺市场份额。 当然&#…
阅读更多...
人工智能前沿——「小海带」超全视觉注意力机制资源分享（附下载链接）

人工智能前沿——「小海带」超全视觉注意力机制资源分享（附下载链接）

📚📚 人工智能 | 计算机视觉 —— 致力于目标检测领域科研Tricks改进与推荐 | 主要包括主干网络改进、轻量化网络、注意力机制、检测头部改进、空间金字塔池化、损失函数及NMS改进、ICCV/CVPR/ECCV视觉顶会创新点改进、各类数据集资源分享以及算法训练相…
阅读更多...
智云通CRM：如何给客户创造尽可能安全的成交环境？

智云通CRM：如何给客户创造尽可能安全的成交环境？

销售人员要想和客户顺利成交，给对方创造尽可能安全的成交环境尤为重要。销售人员的每一句话和每一个观点，应当都是客户所想的。客户是非常聪明的，有任何风吹草动，他们都会提高警惕，这就是客户跟销售人员之间关系的现状…
阅读更多...
笔记：关于使用vitepress 制作静态站点并托管到gitee

笔记：关于使用vitepress 制作静态站点并托管到gitee

笔记：关于使用vitepress 制作静态站点并托管到giteegiteejcLee95：https://blog.csdn.net/qq_28550263?spm1001.2101.3001.5343 邮箱 ：291148484163.com 本文地址：https://blog.csdn.net/qq_28550263/article/details/129419979…
阅读更多...
spring5（五）：AOP操作

spring5（五）：AOP操作

spring5（五）：AOP操作前言一、代理模式1、场景模拟2、代理模式2.1 概念2.2 静态代理2.3 动态代理二、AOP概述1、什么是 AOP?2、相关术语3、作用三、AOP底层原理1、AOP 底层使用动态代理2、AOP（JDK 动态代理）2.1 编写 J…
阅读更多...
二分查找（二）

二分查找（二）

2.练习题 3） 力扣https://leetcode.cn/problems/search-in-rotated-sorted-array-ii/这题需要分三种情况，第一种是区间有序，正常二分查找，第二种是区间 被旋转，左区间的值大于右区间，需要比较目标值和左区…
阅读更多...
机器视觉行业公司2023今年最大的特点-老员工真香现象出现，事出反常必有妖

机器视觉行业公司2023今年最大的特点-老员工真香现象出现，事出反常必有妖

老员工真香现象出现，事出反常必有妖。-老人涨薪，新人不招或降薪，工作2-3年最值得跳槽，培训后好找工作。 你可能看到以上现象很反感，但是现在机器视觉行业环境就是这个样子的。 今年机器视觉行业最大的特点就是项目技术…
阅读更多...
Atlassian Server用户新选择 | 迁移到数据中心版前，您需要做这些准备（2）

Atlassian Server用户新选择 | 迁移到数据中心版前，您需要做这些准备（2）

2024年2月，也就是一年不到，Atlassian将终止对Server产品及插件的所有支持。 此公告发布后，许多用户需要了解怎样的前进方向才是最适合企业的。为此，Atlassian不仅提供云版，还提供了本地部署的数据中心（Data…
阅读更多...
排序算法之希尔排序

排序算法之希尔排序

📝个人主页：爱吃炫迈 💌系列专栏：数据结构与算法 🧑‍💻座右铭：快给我点赞赞💗 文章目录1. 希尔排序2. 算法思路3. 算法实现4. 算法性能分析💞总结💞1. 希尔排…
阅读更多...
帆软FineReport学习篇(一)

帆软FineReport学习篇(一)

帆软FineReport学习篇(一) 1 FineReport 11版下载 1.1 进入下载官网 fineReport 11版本下载链接 1.2 选择合适的版本,点击下载即可 2 解决问题的途径 2.1 社区搜索 2.1.1 进入社区官网 社区官网 2.1.2 输入搜索内容,点击搜索 1.1.3 选择你所需要的答案,建议优先点击官方…
阅读更多...
易基因-单细胞甲基化测序单细胞转录组测序

易基因-单细胞甲基化测序单细胞转录组测序

大家好，这里是专注表观组学十余年，领跑多组学科研服务的易基因。 易基因单细胞甲基化测序&单细胞转录组测序 高通量单细胞DNA甲基化测序简介 单细胞DNA甲基化组学研究很大程度上受制于建库技术，传统的文库构建方法或类似于基因组DNA的单…
阅读更多...
【Python】1分钟就能制作精美的框架图？太棒啦

【Python】1分钟就能制作精美的框架图？太棒啦

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、准备二、基本使用与例子1.初始化与导出2.节点类型3.集群块4.自定义线的颜色与属性总结前言 Diagrams 是一个基于Python绘制云系统架构的模块，它能…
阅读更多...
使用Pytorch实现对比学习SimCLR 进行自监督预训练

使用Pytorch实现对比学习SimCLR 进行自监督预训练

SimCLR（Simple Framework for Contrastive Learning of Representations）是一种学习图像表示的自监督技术。 与传统的监督学习方法不同，SimCLR 不依赖标记数据来学习有用的表示。 它利用对比学习框架来学习一组有用的特征，这些特征…
阅读更多...
linux 匿名管道 pipe

linux 匿名管道 pipe

专栏内容：linux下并发编程个人主页：我的主页座右铭：天行健，君子以自强不息；地势坤，君子以厚德载物．目录 前言 概述 原理介绍 接口说明 pipe 与 fifo的区别 代码演示 结尾 前言 本专栏主…
阅读更多...
【K8S系列】深入解析无状态服务

【K8S系列】深入解析无状态服务

目录 序言 1. 无服务介绍 1.1 优点 1.2 使用场景 1.3 资源类型 1.4 总结 2 使用介绍 2.1 Deployment 使用场景： 2.2 ReplicaSet 使用场景 2.3 pod Pod 资源定义示例 2.4 service 创建一个Deployment： 创建一个Service： 总结…
阅读更多...
ChatGPT，让程序员从一片黑暗森林奔向另一片黑暗森林！

ChatGPT，让程序员从一片黑暗森林奔向另一片黑暗森林！

几年前看过一个电影，叫做《隐藏人物》，主要讲三位女性在NASA工作时反抗“种族歧视”和“性别歧视”的故事，其中有个情节让我印象极其深刻：NASA计算部门有一群女生，她们的工作是计算飞船轨道，纯手工计算。某…
阅读更多...
【算法基础】(一)基础算法 --- 离散化

【算法基础】(一)基础算法 --- 离散化

✨个人主页：bit me ✨当前专栏：算法基础 🔥专栏简介：该专栏主要更新一些基础算法题，有参加蓝桥杯等算法题竞赛或者正在刷题的铁汁们可以关注一下，互相监督打卡学习 🌹 🌹 &#x1f3…
阅读更多...
最新文章

Copyright @ 2022~2023