MySQL主从复制之GTID模式

news2024/11/15 21:34:34

目录

1 MySQL 主从复制 GTID 模式介绍

2 传统复制模式与GTID复制模式的区别

3 GTID模式核心参数

4 GTID 实现自动复制原理

4.1 GTID基本概念

4.2 GTID复制流程

5 GTID 实现自动定位

5.1 配置 my.cnf

5.2 配置 SLAVE 实现自动定位

5.3 测试

6 GTID 模式 故障转移的方法流程

6.1 实现故障转移的流程

6.2 实操故障转移


1 MySQL 主从复制 GTID 模式介绍

GTID用于在binlog中唯一标识一个事务。当事务提交时,MySQL Server在写binlog的时候,会先写一个特殊的Binlog Event,类型为GTID_Event,指定下一个事务的GTID,然后再写事务的Binlog。主从同步时GTID_Event和事务的Binlog 都会传递到从库,从库在执行的时候也是用同样的GTID写binlog,这样主从同步以后,就可通过GTID确定从库同步到的位置了。也就是说,无论是级联情况,还是一主多从情况,都可以通过GTID自动找点儿,而无需像之前那样通过File_name和File_position找点儿了。

1、master更新数据时,会在事务前产生GTID,一同记录到binlog日志中。

2、slave端的i/o 线程将变更的binlog,写入到本地的relay log中。

3、sql线程从relay log中获取GTID,然后对比slave端的binlog是否有记录。

4、如果有记录,说明该GTID的事务已经执行,slave会忽略。

5、如果没有记录,slave就会从relay log中执行该GTID的事务,并记录到binlog。

2 传统复制模式与GTID复制模式的区别

特性GTID 模式传统模式
事务标识符使用全局唯一的标识符依赖于二进制日志文件名和位置
故障恢复更容易实现手动指定主服务器的位置和文件名
复制管理简化复制管理较为复杂
跨实例复制支持跨不同版本和类型的 MySQL 实例之间复制可能有限制

3 GTID模式核心参数

重要参数:

gtid-mode=on
enforce-gtid-consistency=true
log-slave-updates=1

gtid-mode=on                        --启用gtid类型,否则就是普通的复制架构
enforce-gtid-consistency=true       --强制GTID的一致性
log-slave-updates=1                 --slave更新是否记入日志

4 GTID 实现自动复制原理

4.1 GTID基本概念

  • GTID:每个事务在提交时都会生成一个GTID,该GTID由服务器ID和事务序号组成,确保了事务的全局唯一性。
  • GTID已执行列表 (gtid_executed):记录了在给定服务器上已经执行过的所有GTID。
  • GTID未执行列表 (gtid_purged):记录了已经从二进制日志(binlog)中删除但尚未在所有从服务器上执行的GTID。

4.2 GTID复制流程

  1. 事务提交

    当一个事务在主服务器上提交时,它会被分配一个GTID,并写入二进制日志(binlog)。
  2. GTID传播

    主服务器将包含GTID的binlog事件发送给从服务器。从服务器接收到这些binlog事件后,会检查gtid_executed列表,以确保不会重复执行同一个事务。
  3. GTID执行

    从服务器执行接收到的事务,同时将执行的GTID添加到自己的gtid_executed列表中。
  4. 自动定位

    当从服务器开始复制时,如果启用了MASTER_AUTO_POSITION = 1,它将自动从包含下一个未执行GTID的binlog文件开始复制。

        从服务器会查找gtid_executed列表中缺失的GTID,并从相应的binlog文件和位置开始复制。

5 GTID 实现自动定位

开启GTID

5.1 配置 my.cnf

MASTER

[root@mysql-01 ~]# vim /etc/my.cnf
[mysqld]
datadir=/data/mysql
socket=/data/mysql/mysql.sock
symbolic-links=0
log_bin=mysql-bin
server_id=10
# 增加以下两条
gtid_mode=ON    # 开启GTID
enforce-gtid-consistency=ON    # 保证GTID的强一致性

SLAVE

############################### SLAVE-1 ###############################
[root@mysql-02 ~]# vim /etc/my.cnf
[mysqld]
datadir=/data/mysql
socket=/data/mysql/mysql.sock
symbolic-links=0
server_id=20
super_read_only=on
# 增加以下两条
gtid_mode=ON
enforce-gtid-consistency=ON


############################### SLAVE-2 ###############################

[root@mysql-03 ~]# vim /etc/my.cnf
[mysqld]
datadir=/data/mysql
socket=/data/mysql/mysql.sock
symbolic-links=0
server_id=30
super_read_only=on
# 增加以下两条
gtid_mode=ON
enforce-gtid-consistency=ON

5.2 配置 SLAVE 实现自动定位

MASTER 

SLAVE 1

mysql> stop slave;

mysql> change master to
    -> master_host='192.168.239.210',
    -> master_user='repl',
    -> master_password='Openlab123!',
    -> master_auto_position=1;

mysql> start slave;

mysql> show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.239.210
                  Master_User: repl
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000008
          Read_Master_Log_Pos: 740
               Relay_Log_File: mysql-02-relay-bin.000002
                Relay_Log_Pos: 913
        Relay_Master_Log_File: mysql-bin.000008
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 740
              Relay_Log_Space: 1123
              Until_Condition: None
                Until_Log_Pos: 0
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
             Master_Server_Id: 10
                  Master_UUID: cd27e5ae-5fe3-11ef-a5d8-000c29a51779
             Master_Info_File: /data/mysql/master.info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
           Retrieved_Gtid_Set: cd27e5ae-5fe3-11ef-a5d8-000c29a51779:5-6
            Executed_Gtid_Set: cd27e5ae-5fe3-11ef-a5d8-000c29a51779:1-6

[root@mysql-02 ~]# mysqlbinlog /data/mysql/
auto.cnf                   ib_logfile0                mysql-02-relay-bin.000001  mysql.sock.lock            shuyan/
ca-key.pem                 ib_logfile1                mysql-02-relay-bin.000002  performance_schema/        sys/
ca.pem                     ibtmp1                     mysql-02-relay-bin.index   private_key.pem            ZUCONG/
client-cert.pem            master.info                mysql-bin.000001           public_key.pem             
client-key.pem             mysql/                     mysql-bin.000002           relay-log.info             
ib_buffer_pool             mysql-02.err               mysql-bin.index            server-cert.pem            
ibdata1                    mysql-02.pid               mysql.sock                 server-key.pem             
[root@mysql-02 ~]# mysqlbinlog /data/mysql/mysql-02-relay-bin.000002 -vv

 

SLAVE 2

mysql> stop slave;

mysql> change master to
    -> master_host='192.168.239.210',
    -> master_user='repl',
    -> master_password='Openlab123!',
    -> master_auto_position=1;

mysql> start slave;

mysql> show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.239.210
                  Master_User: repl
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000008
          Read_Master_Log_Pos: 740
               Relay_Log_File: mysql-3-relay-bin.000002  # 本地relay文件
                Relay_Log_Pos: 913
        Relay_Master_Log_File: mysql-bin.000008      # master bin-log 文件
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 740
              Relay_Log_Space: 1122
              Until_Condition: None
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
Master_SSL_Verify_Server_Cert: No
             Master_Server_Id: 10
                  Master_UUID: cd27e5ae-5fe3-11ef-a5d8-000c29a51779
             Master_Info_File: /data/mysql/master.info
                    SQL_Delay: 0            
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
           Retrieved_Gtid_Set: cd27e5ae-5fe3-11ef-a5d8-000c29a51779:5-6
            Executed_Gtid_Set: cd27e5ae-5fe3-11ef-a5d8-000c29a51779:1-6
                Auto_Position: 1        # GTID 功能开启

5.3 测试

MASTER

--MASTER 增加一条数据之后 查看MASTER 的 bin-log 与 SLAVE中的 relay文件

mysql> use shuyan;
mysql> insert into wawa(id,name) values(5,'shuyan.com');

[root@mysql-01 ~]# mysqlbinlog /data/mysql/mysql-bin.
mysql-bin.000001  mysql-bin.000002  mysql-bin.000003  mysql-bin.000004  mysql-bin.000005  mysql-bin.000006  mysql-bin.000007  mysql-bin.000008  mysql-bin.index
[root@mysql-01 ~]# mysqlbinlog /data/mysql/mysql-bin.000008 -vv

SLAVE

[root@mysql-02 ~]# mysqlbinlog /data/mysql/mysql-02-relay-bin.00000
mysql-02-relay-bin.000001  mysql-02-relay-bin.000002  

[root@mysql-02 ~]# mysqlbinlog /data/mysql/mysql-02-relay-bin.000002 -vv

6 GTID 模式 故障转移的方法流程

6.1 实现故障转移的流程

当启用 GTID(全局事务标识符)时,MySQL 使用一种称为自动故障转移的方法来处理主服务器故障。在这种情况下,当主服务器出现故障时,可以将从服务器提升为主服务器。以下是基本步骤:

1、选择新的主服务器:

当主服务器发生故障时,管理员会选择一个新的主服务器(通常是最近的数据最接近的从服务器)。

2、设置新的主服务器:

新的主服务器需要被设置为主服务器,这意味着它应该停止接受新数据并开始发送二进制日志给其他从服务器。

3、更改从服务器的配置:

其他从服务器需要更改它们的配置,以便从新的主服务器接收二进制日志。

4、GTID 自动同步:

由于 GTID 的特性,从服务器无需知道新的主服务器的精确位置。它们只需继续读取自己的 GTID 下一个待处理的事务即可。

6.2 实操故障转移

当主服务器(Master)宕机时,需要管理员介入来手动指定一个新的主服务器。这里是一个简单的流程说明:

  1. 确认Master宕机

    首先确认Master服务器是否真的宕机了。可以通过尝试连接服务器或检查服务器状态来确认。
  2. 检查从服务器的状态

    在 SLAVE 使用 SHOW SLAVE STATUS \G;命令检查所有从服务器的状态,特别是它们的Executed_Gtid_Set。        
  3. 选择新的Master

  4. 选择一个拥有最长的Executed_Gtid_Set的从服务器作为新的Master。这意味着它已经执行了最多的事务,因此拥有最新的数据。
  5. 停止从服务器复制

    对于选定的新的Master,使用STOP SLAVE;命令来停止其从属状态。
  6. 配置新的Master

     调整配置文件(如my.cnf/my.ini)增加log-bin=mysql-bin,确保新的Master配置正确,包括监听端口等设置。
  7. 启动新的Master服务

    重新启动MySQL服务以使更改生效。
  8. 配置其他从服务器指向新Master

    对于其他从服务器,需要修改它们的复制设置以指向新的Master:
 CHANGE MASTER TO
     MASTER_HOST='<new_master_ip>',
     MASTER_USER='<replication_user>',
     MASTER_PASSWORD='<replication_password>',
     MASTER_AUTO_POSITION=1;

然后启动复制:

 START SLAVE;

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2071952.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

如何使用ssm实现宠物领养系统+vue

TOC ssm103宠物领养系统vue 课题背景 在当今的社会&#xff0c;可以说是信息技术的发展时代&#xff0c;在社会的方方面面无不涉及到各种信息的处理。信息是人们对客观世界的具体描述&#xff0c;是人们进行交流与联系的重要途径。人类社会就处在一个对信息进行有效合理的加…

mysql数据库----简单认识库的操作

目录 1.区分概念 2.什么是数据库 3.数据库的创建和销毁 4.数据库编码初识 5.查询系统默认编码配置 6.两个查询编码表的指令 7.创建指定编码的数据库 8.不同编码的区别 第一个编码方式&#xff1a; 第二个编码方式&#xff1a; 查询结果说明&#xff1a; 9.数据库的增…

QT Quick QML 网络助手——TCP客户端

GitHub 源码: QmlLearningPro &#xff0c;选择子工程 Nettools.pro QML 其它文章请点击这里: QT QUICK QML 学习笔记 ● 运行效果&#xff1a; 左侧为常用的网络调试工具&#xff0c;右侧为本项目 UI 效果&#xff0c;前端使用 QML &#xff0c;后端使用C &#xff…

ArkTs之:数据懒加载——LazyForEach的用法

官方描述 LazyForEach从提供的数据源中按需迭代数据&#xff0c;并在每次迭代过程中创建相应的组件。当在滚动容器中使用了LazyForEach&#xff0c;框架会根据滚动容器可视区域按需创建组件&#xff0c;当组件滑出可视区域外时&#xff0c;框架会进行组件销毁回收以降低内存占…

我在某日重新下载了idea

# 1 Maven设置 2 字体样式,字体颜色 3 插件 1,fitten code和通义灵码 2,one dark theme主题 3,mybatisX 4,Rainbow Brackets 5,Key Promoter X 设置 自动导入包

Ps:首选项 - 常规

Ps菜单&#xff1a;编辑/首选项 Edit/Preferences 快捷键&#xff1a;Ctrl K Photoshop 首选项中的“常规” General选项卡主要用于调整 Photoshop 的整体工作行为和用户体验。这些设置让用户可以根据个人习惯和工作流程定制软件的响应方式和界面布局&#xff0c;从而提高工作…

下载的word中的mathtype公式双击无法打开编辑器

原因分析&#xff1a; 该word中的此公式不是通过word内置的mathtype插入公式的&#xff0c;而是从mathtype编辑器中复制粘贴到word中的。 后者的方式当被其他人下载接收后&#xff0c;无法修改此公式&#xff0c;而且该公式也不能被其他人复制&#xff0c;会报错如下&#xff…

GPT-4o System Card is released

GPT-4o System Card is released, including red teaming, frontier risk evaluations, and other key practices for industrial-strength Large Language Models. https://openai.com/index/gpt-4o-system-card/ 报告链接 企业级生成式人工智能LLM大模型技术、算法及案例实战…

5G毫米波测试助力突破高频段设备局限,实现高效外场测试

作者介绍 一、方案背景 随着业务对带宽需求的不断增加&#xff0c;通信频谱不断向更高频谱延伸&#xff0c;5G毫米波具有丰富的频率资源&#xff0c;是移动通信技术演进的必然方向。下图是ITU的WRC-19会议发布的目前5G所占用频段。 从图中可以看出&#xff0c;在5G毫米波测试中…

AgentQ,超越人类的人工智能代理

MultiOn 宣布推出一款新代理AgentQ&#xff0c;这是一款令人惊叹的产品&#xff0c;它整合了我最近一直在讨论的大部分内容&#xff1a;将 LLM 与搜索相结合。 但这个经纪人很特殊。 与其他代理不同的是&#xff0c;由于巧妙地使用了对齐技术&#xff0c;该代理可以从好的和坏的…

redis | 认识非关系数据库Redis的位图数据类型

Redis 非关 kv型 位图常用命令应用场景python操作位图 位图 位图不是真正的数据类型&#xff0c;它是定义在字符串类型中 01100001 97 61 a 01100010 98 62 b 一个字符串类型的值最多能存储512M字节的内容 位上限&#xff1a;2^32 常用命令 SETBIT \x : 16进制 没有key值 GE…

npm 设置代理

目录 前言 一、查看npm配置 二、设置代理 三、删除代理 四、代理认证 往期回顾 前言 在使用npm时&#xff0c;如果您处于需要使用代理的网络环境中&#xff0c;您可以通过配置npm来设置代理。 一、查看npm配置 npm config list或者单独查看 npm config get proxynpm co…

Using Azure openAI key rotation automation

题意&#xff1a;使用 Azure OpenAI 密钥轮换自动化 问题背景&#xff1a; We are planning to do the Azure OpenAI key rotation automatically. How can we achieve this? Do we have terraform resource for this. 我们计划自动执行 Azure OpenAI 密钥轮换。我们如何实现…

垃圾分类笔记YOLOV5(一)-pip换源-口罩识别-训练自己的数据集

pip换源网址 pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple不进行配置的是临时换源 1、从github上下载YOLOV5的代码 翻墙软件clash 数据集地址roboflow clash配置一键导入 哔哩哔哩视频地址 数据集的下载格式&#xff1a; 2、修改自己的数据…

HarmonyOS NEXT 地图服务中‘我的位置’功能全解析

1 前言 “我的位置”功能在表象上或许给人以简单之感&#xff0c;但从专业角度深入剖析&#xff0c;其蕴含着极为可观的信息量与巨大潜力。此功能绝非仅仅局限于作为一个单纯显示用户当前所处地点的标识&#xff0c;而确切地说是连接用户与周边世界、实现个性化服务的关键纽带…

operlayers-初始化地图-天地图初始化地图

今天分享一篇初始化operlayers的文章&#xff0c;算上一篇笔记吧&#xff0c;以后再有项目时直接看笔记回省好多事&#xff0c;也帮网上的兄弟们避避雷。 前言 这个项目是vue3operlayers开发的一个有关地名地址的小插件&#xff0c;具体服务就不展示了。 之所以用天地图来加…

CMake构建学习笔记3-libpng库的构建

libpng是一个用于读取、写入 PNG (Portable Network Graphics) 文件格式的开源软件库&#xff0c;有了上一篇笔记作为基础&#xff0c;构建起来也非常简单。还是在源代码的根目录中创建一个build文件夹&#xff0c;执行如下关键指令&#xff1a; # 配置CMake cmake .. -G &q…

86.游戏改造-UI修正暴力分析

免责声明&#xff1a;内容仅供学习参考&#xff0c;请合法利用知识&#xff0c;禁止进行违法犯罪活动&#xff01; 内容参考于&#xff1a;易道云信息技术研究院 上一个内容&#xff1a;85.游戏改造-修改UI分辨率&#xff0c;面向对象方式 85.游戏改造-修改UI分辨率&#xff…

【Material-UI】深入了解Radio Group中的useRadioGroup Hook

文章目录 一、什么是useRadioGroup&#xff1f;1.1 Hook的返回值 二、useRadioGroup的基本用法2.1 代码示例2.2 代码解析 三、useRadioGroup的应用场景3.1 动态样式调整3.2 高级交互逻辑 四、使用useRadioGroup的最佳实践4.1 保持代码简洁4.2 结合主题定制4.3 注意无障碍设计 五…

通过Python绘制不同数据类型适合的可视化图表

在数据可视化中&#xff0c;对于描述数值变量与数值变量之间的关系常见的有散点图和热力图&#xff0c;以及描述数值变量与分类变量之间的关系常见的有条形图&#xff0c;饼图和折线图&#xff0c;可以通过使用Python的matplotlib和seaborn库来绘制图表进行可视化表达&#xff…