基础
MySQL
MySQL
  • 基础知识
    • MySQL 的安装与配置
      • Windows
        • 安装
        • 配置文件
      • Linux
        • 安装
        • 配置文件
      • docker
      • mysql 配置文件格式
    • MySQL 查询的执行过程
      • MySQL 的客户端/服务器通信协议
      • MySQL 查询优化器
        • 优化器可能选择错误的执行计划
        • MySQL 能够处理的优化类型
          • 优化 COUNT()、MIN() 和 MAX()
          • 预估并转化为常数表达式
          • 提前终止查询
          • 排序优化
      • MySQL如何执行联接查询
    • 事务
      • ACID
      • 隔离级别
      • 死锁
      • 事务日志
      • 两阶段锁定协议
      • 多版本并发控制(MVCC)
  • SQL 优化
    • schema 设计
      • 选择数据类型
        • 整数类型
        • 实数类型
        • 字符串类型
          • VARCHAR 和 CHAR
          • BINARY 和 VARBINARY
          • BLOB 和 TEXT
          • ENUM 和 SET
        • 日期类型
      • 选择标识符
    • 索引
      • HASH 索引
      • B-tree 索引
      • 聚簇索引
      • 覆盖索引
      • 前缀索引和索引的选择性
      • 索引合并
      • 选择合适的索引列顺序
      • 使用索引扫描来做排序
      • 维护索引和表
    • 查询优化
      • 优化 SQL 语句的一般步骤
        • 1. 通过 show status 命令了解各种 SQL 的执行频率
        • 2. 定位执行效率较低的 SQL 语句
        • 3. 通过 EXPLAIN 分析低效 SQL 的执行计划
        • 4. 通过 SHOW PROFILE 分析 SQL
        • 5. 通过 TRACE 分析优化器如何选择执行计划
        • 6. 确定问题并采取相应的优化措施
      • 两个简单实用的优化方法
      • 一个复杂查询还是多个简单查询
      • 常用 SQL 的优化
        • 大批量插入数据
        • 优化 GROUP BY 语句
        • 优化联接查询
        • 优化分页查询
        • 优化 SQL_CALC_FOUND_ROWS
        • 优化 UNION 查询
    • Performance Schema
      • 配置
      • 使用
        • 检查SQL语句
        • 检查预处理语句
        • 语句剖析
        • 检查读写性能
        • 检查内存使用情况
        • 检查变量
    • MySQL线程
    • 复制
      • 概述
        • 复制中的各类文件
        • 三种复制格式
        • 全局事务标识符(GTID)
        • 崩溃后的复制安全
      • 安装
        • 基于二进制日志文件位置的复制
        • 基于GTID的复制
      • 复制拓扑
        • 主动/被动模式
        • 主动/只读池模式
        • 多级复制架构
  • 其他
    • 查询缓存
    • 批量insert
    • MySQL 锁的类型
    • MySQL 的索引有哪些
    • INSERT ... ON DUPLICATE KEY UPDATE Statement
由 GitBook 提供支持
在本页
  1. SQL 优化
  2. 复制
  3. 概述

全局事务标识符(GTID)

在 MySQL 5.6 之前,副本必须跟踪连接到主节点时读取的二进制日志文件和日志位置。例如,一个副本连接到主节点并从文件 binlog.000002 的 2749 位置读取数据。当副本从该二进制日志中读取事件时,它每次都会向后推进日志位点。

如果就在这时,故障发生了!比如主数据库崩溃了,必须从备份中重建数据。那么问题来了:在主节点,如果二进制日志位点重新开始,怎么能重新将副本连接到主节点?

确定从哪个位点开始连接是一个非常复杂的过程。如果指向的位点太早,那么副本上就会获得重复的事件,如果指向的位点太晚,则会漏掉事件。无论使用哪种方式,都难以正确地将副本连接到主节点。

为了解决这个问题,MySQL 新增了另一种跟踪复制位点的方法:全局事务标识符(Global Transaction Identifiers, GTID)。

使用 GTID,主节点提交的每个事务都被分配一个唯一标识符,标识符由 server_uuid 和一个递增的事务编号组成。当事务被写入二进制日志时,GTID 也随之被写入。

副本将从主节点读取的二进制日志事件先写入本地中继日志,再使用 SQL 线程执行该事务,将变更应用到本地副本上。当 SQL 线程提交事务时,它会将 GTID 标记为执行完成。

GTID 解决了运行 MySQL 复制的一个令人痛苦的问题:处理日志文件和位置。

强烈建议始终按照 MySQL 官方文档中的说明,在数据库中启用 GTID。

gtid_executed

GTID(全局事务标识符)存储在名为 mysql.gtid_executed 的表中。该表由 3 列组成:

  • 服务器的 UUID

  • 起始 ID

  • 结束 ID

因此,表中每一行表示一个 GTID(起始 ID 和结束 ID 相同时)或一组 GTID(结束 ID 与起始 ID 的差代表GTID 的个数)。

只有将 gtid_mode 配置成 ON 或 ON_PERMISSIVE,GTID 才会被存入 mysql.gtid_executed 表中,更新mysql.gtid_executed 的时机根据是否启用二进制日志而存在差别:

  • 如果二进制日志已禁用(系统变量 log_bin=OFF),或者如果 log_slave_updates 已禁用,服务器会将每个事务的 GTID 与事务一起存储在表 mysql.gtid_executed 中。此外,该表定期按用户可配置的速率进行压缩。

  • 如果启用了二进制日志(系统变量 log_bin=ON),每当二进制日志轮换或服务器关闭时,服务器将上一个二进制日志中写入的所有事务的 GTID 写入 mysql.gtid_executed 表。

log_bin 是系统变量,而二进制日志文件的配置是 log-bin。

在服务器意外停止的情况下,当前二进制日志文件的 GTID 集不会保存在 mysql.gtid_executed 表中。这些 GTIDs 会在恢复期间从二进制日志文件中添加到表中。

例外情况是,如果在服务器重新启动时未启用二进制日志,则服务器无法访问二进制日志文件以恢复 GTIDs,因此无法启动复制。

当启用二进制日志时,mysql.gtid_executed 表不保存所有已执行事务的完整 GTID 记录。这方面的信息由 gtid_executed 系统变量的全局值提供。

SELECT * FROM mysql.gtid_executed;
+------------------------------------+--------------+------------+
|source_uuid                         |interval_start|interval_end|
+------------------------------------+--------------+------------+
|2e7c13f7-92e1-11ec-b712-b42e99f272fa|1             |1           |
+------------------------------------+--------------+------------+

SELECT @@GLOBAL.gtid_executed;
+----------------------------------------+
|@@GLOBAL.gtid_executed                  |
+----------------------------------------+
|2e7c13f7-92e1-11ec-b712-b42e99f272fa:1-5|
+----------------------------------------+

始终使用 @@GLOBAL.gtid_executed,该变量在每次提交后更新,以表示 MySQL 服务器的GTID 状态,不要查询 mysql.gtid_executed 表。

使用 mysql.gtid_executed 表时,不强制要求启用二进制日志记录。

为了能够进行复制,主节点必须始终启用二进制日志。但是,从节点可以使用 GTIDs,而无需启用二进制日志记录。

为了节省空间,MySQL 服务器会定期压缩 mysql.gtid_executed 表。

  • 可以通过设置 gtid_executed_compression_period 系统变量来控制在表被压缩之前允许经过的事务数量,从而控制压缩频率。该变量的默认值是 1000,这意味着默认情况下,表在每 1000 个事务后进行一次压缩。

  • 将 gtid_executed_compression_period 设置为 0 将完全阻止压缩,如果这样做,gtid_executed 表所需磁盘空间可能会大幅增加。

  • 当启用二进制日志时,gtid_executed_compression_period 的值将不起作用,mysql.gtid_executed 表在每次二进制日志轮换时都会被压缩。

  • mysql.gtid_executed 表的压缩由名为 thread/sql/compress_gtid_table 的专用前台线程执行。此线程不会出现在 SHOW PROCESSLIST 的输出中,但可以在threads表中查看,如下所示:

    SELECT * FROM performance_schema.threads WHERE NAME LIKE '%gtid%';
    +-------------------+------------------------------+
    |THREAD_ID          |25                            |
    +-------------------+------------------------------+
    |NAME               |thread/sql/compress_gtid_table|
    +-------------------+------------------------------+
    |TYPE               |FOREGROUND                    |
    +-------------------+------------------------------+
    |PROCESSLIST_ID     |1                             |
    +-------------------+------------------------------+
    |PROCESSLIST_USER   |NULL                          |
    +-------------------+------------------------------+
    |PROCESSLIST_HOST   |NULL                          |
    +-------------------+------------------------------+
    |PROCESSLIST_DB     |NULL                          |
    +-------------------+------------------------------+
    |PROCESSLIST_COMMAND|Daemon                        |
    +-------------------+------------------------------+
    |PROCESSLIST_TIME   |346                           |
    +-------------------+------------------------------+
    |PROCESSLIST_STATE  |Suspending                    |
    +-------------------+------------------------------+
    |PROCESSLIST_INFO   |NULL                          |
    +-------------------+------------------------------+
    |PARENT_THREAD_ID   |1                             |
    +-------------------+------------------------------+
    |ROLE               |NULL                          |
    +-------------------+------------------------------+
    |INSTRUMENTED       |YES                           |
    +-------------------+------------------------------+
    |HISTORY            |YES                           |
    +-------------------+------------------------------+
    |CONNECTION_TYPE    |NULL                          |
    +-------------------+------------------------------+
    |THREAD_OS_ID       |6788                          |
    +-------------------+------------------------------+
上一页三种复制格式下一页崩溃后的复制安全

最后更新于1年前