一 、什么是MySQL主从
MySQL主从(Master-Slave)复制是一种数据复制机制,用于将一个MySQL数据库服务器(主服务器)的数据复制到其他一个或多个MySQL数据库服务器(从服务器)。这种复制机制可以提供数据冗余、增加读取性能、实现高可用性、灾难恢复和数据分析等功能。
二、MySQL主从的作用
- 数据冗余和备份
- 分摊读取负载
- 提供高可用性
- 灾难恢复和故障转移
- 数据分析和报表生成
三、MySQL 8.3.0 过时的并需要移除的 replication 选项和变量。
注意MySQL 8.3.0 版本中很多参数已经移除不在使用,千万注意:
许多与 MySQL replication相关的选项和变量在以前的 MySQL 版本中已被弃用,并已从 MySQL 8.3 中删除。现在尝试使用其中任何一个都会导致服务器引发语法错误。这些选项和变量列于此处:
- –slave-rows-search-algorithms:复制应用程序在应用更新或删除时用于查找表行的算法现在始终为HASH_SCAN,INDEX_SCAN,并且用户不再可配置。
- log_bin_use_v1_events:这允许运行 MySQL 5.7 及更高版本的源服务器复制到不再支持或维护的早期版本的 MySQL。
- –relay-log-info-file、 --relay-log-info-repository、 --master-info-file、 --master-info-repository:这些已经被crash-safe 表取代,并且不再受支持。
- transaction_write_set_extraction
- group_replication_ip_whitelist: group_replication_ip_allow list 代替使用。
- group_replication_primary_member: 不再需要; 通过查询 Performance Schema 中replication_group_members表的MEMBER_ROLE列。
- –skip-host-cache: 该选项已被删除;改为启动服务器 --host-cache-size=0。
- –innodb和–skip-innodb: 这些选项已被删除。存储 InnoDB引擎始终处于启用状态,并且无法禁用它。
- –character-set-client-handshake和–old-style-user-limits: 这些选项以前用于与非常旧的 MySQL 版本兼容,这些版本不再受支持或维护,因此不再有任何有用的用途。
- **过时的 CMake 选项 ** 以下用于使用 CMake 编译服务器的选项已过时并已被删除:
- USE_LD_LLD: 使用WITH_LD=lld代替。
- WITH_BOOST、 DOWNLOAD_BOOST、 DOWNLOAD_BOOST_TIMEOUT:不再需要这些选项; MySQL 现在在从源代码编译时包含并使用捆绑版本的 Boost。
- GTID-based replication 和 IGNORE_SERVER_IDS: 当使用全局事务标识符 (GTID) 进行复制时,已应用的事务将被自动忽略。这意味着IGNORE_SERVER_IDS与 GTID 模式不兼容。如果 gtid_mode是 ON,CHANGE REPLICATION SOURCE TO则非空 IGNORE_SERVER_IDS列表将被拒绝并出现错误。同样,如果使用要忽略的服务器 ID 列表创建任何现有复制通道, SET gtid_mode=ON也会被拒绝。在开始基于 GTID 的复制之前,检查并清除所涉及服务器上任何被忽略的服务器 ID 列表;您可以通过检查SHOW REPLICA STATUS的输出来做到这一点 。在这种情况下,您可以通过发出CHANGE REPLICATION SOURCE TO 空列表来清除服务器 ID 列表 ,如下所示:
CHANGE REPLICATION SOURCE TO IGNORE_SERVER_IDS = ();
四、手动搭建 MySQL master/slave 主从复制集群
本文采用Docker 容器的方式搭建集群。容器已经完整的封装好主从集群的相关环境变量信息,只需要做相关的初始化配置即可快速完整主从复制搭建。
获取MySQL Docker
docker pull registry.cn-hangzhou.aliyuncs.com/qingcloudtech/mysql:8.3.0
与主从复制相关的环境变量:
- MYSQL_REPLICATION_MODE:复制模式。可能的值master/ slave。没有默认值。
- MYSQL_REPLICATION_USER:首次运行时在master服务器上创建的REPLICATION用户。没有默认值。
- MYSQL_REPLICATION_PASSWORD:REPLICATION用户密码。没有默认值。
- MYSQL_MASTER_HOST:master主机名/IP(slave节点参数)。没有默认值。
- MYSQL_MASTER_PORT_NUMBER:master服务器端口(slave节点参数)。默认为3306.
- MYSQL_MASTER_ROOT_USER:master上有权访问MYSQL_DATABASE(slave节点参数)的用户。默认为root
- MYSQL_MASTER_ROOT_PASSWORD:master上有权访问MYSQL_DATABASE(slave节点参数)的用户的密码。没有默认值。
- MYSQL_MASTER_DELAY:数据库复制延迟(slave节点参数)。默认为0.
在复制集群中,您可以拥有一个master服务器和零个或多个slave服务器。启用复制后,master节点处于读写模式,而slave节点处于只读模式。为了获得最佳性能,建议限制对从属设备的读取。
第 1 步:创建复制主服务器
第一步是启动MySQL master。
docker run --name mysql-master \
-e MYSQL_ROOT_PASSWORD=master_root_password \
-e MYSQL_REPLICATION_MODE=master \
-e MYSQL_REPLICATION_USER=my_repl_user \
-e MYSQL_REPLICATION_PASSWORD=my_repl_password \
-e MYSQL_USER=my_user \
-e MYSQL_PASSWORD=my_password \
-e MYSQL_DATABASE=my_database \
registry.cn-hangzhou.aliyuncs.com/qingcloudtech/mysql:8.3.0
在上面的命令中,容器被配置为master使用MYSQL_REPLICATION_MODE参数。MYSQL_REPLICATION_USER使用和参数指定复制用户MYSQL_REPLICATION_PASSWORD。
第2步:创建复制从站
接下来我们启动一个 MySQL 从属容器。
docker run --name mysql-slave --link mysql-master:master \
-e MYSQL_REPLICATION_MODE=slave \
-e MYSQL_REPLICATION_USER=my_repl_user \
-e MYSQL_REPLICATION_PASSWORD=my_repl_password \
-e MYSQL_MASTER_HOST=mysql-master \
-e MYSQL_MASTER_ROOT_PASSWORD=master_root_password \
registry.cn-hangzhou.aliyuncs.com/qingcloudtech/mysql:8.3.0
在上面的命令中,容器被配置为slave, 使用MYSQL_REPLICATION_MODE参数。slave节点使用MYSQL_MASTER_HOST、MYSQL_MASTER_ROOT_USER和参数MYSQL_MASTER_ROOT_PASSWORD连接到master。它还会转储主服务器中的现有数据。replication user使用MYSQL_REPLICATION_USER和参数MYSQL_REPLICATION_PASSWORD指定,并且应与master节点上指定的相同。
现在已经启动并运行一个两节点 MySQL 主/从复制集群。还可以通过添加/删除从属服务器来扩展集群,而不会导致任何停机。
通过 Docker Compose,可以使用以下命令设置主/从复制:
version: '3.9'
services:
mysql-master:
image: 'registry.cn-hangzhou.aliyuncs.com/qingcloudtech/mysql:8.3.0'
ports:
- '3306'
volumes:
- /path/to/mysql-persistence:/bitnami/mysql/data
environment:
- MYSQL_REPLICATION_MODE=master
- MYSQL_REPLICATION_USER=repl_user
- MYSQL_REPLICATION_PASSWORD=repl_password
- MYSQL_ROOT_PASSWORD=master_root_password
- MYSQL_USER=my_user
- MYSQL_PASSWORD=my_password
- MYSQL_DATABASE=my_database
mysql-slave:
image: 'registry.cn-hangzhou.aliyuncs.com/qingcloudtech/mysql:8.3.0'
ports:
- '3306'
depends_on:
- mysql-master
environment:
- MYSQL_REPLICATION_MODE=slave
- MYSQL_REPLICATION_USER=repl_user
- MYSQL_REPLICATION_PASSWORD=repl_password
- MYSQL_MASTER_HOST=mysql-master
- MYSQL_MASTER_PORT_NUMBER=3306
- MYSQL_MASTER_ROOT_PASSWORD=master_root_password
使用以下方法扩展slave数量:
docker-compose up --detach --scale mysql-master=1 --scale mysql-slave=3
上面的命令将 Slave 的数量增加到3,您可以用同样的方式缩小规模。
注意:您不应增加/减少master节点的数量。始终只有一个主节点运行。
五、QingHub Studio快熟一键搭建 MySQL Master/Slave 主从复制
- 进入QingHub Studio 广场,-> 标准应用 > 查找【MySQL8.3.0 主从复制方案】
- 安装订阅该服务
- 进入QingHub Studio 部署设计器-新建部署
- 直接把刚刚安装的MySQL服务拖到设计器中。
- 选择部署目标服务器,一键部署(前提是该服务已经按装好agent)
- 部署成功后启动服务,并检查状态,完成服务部署。实时监控服务状态
后续
在完成MySQL 主从部署之后,可以基于此服务,继续部署其他应用节点,直接拖拽到该设计器即可。QingHub Studio 部署设计器完全做到:
可视化,可操作,可修改,可监控,可执行
Qinghub Studio 在线体验