MySQL GTID全面總結

GTID，全稱Global transaction identifiers，也稱之為全局事務ID。MySQL-5.6.2開始支持，MySQL-5.6.10后完善，GTID 分成兩部分，一部分是服務的UUid,UUID保存在mysql數據目錄的auto.cnf文件中,這是一個非常重要的文件，不能刪除，這一部分是不會變的。下面是一個uuid的值舉例：

[root@dev01 mysql]# cat auto.cnf [auto]server-uuid=ac1ebad0-ef76-11e7-872b-080027a03bb6

另外一部分就是事務ID了，隨著事務的增加，值依次遞增。也就是說，GTID實際上是由UUID+TID組成的。其中UUID是一個MySQL實例的唯一標識。TID代表了該實例上已經提交的事務數量。如下所示為一個GTID的例子：

3db33b36-0e51-409f-a61d-c99756e90155:1-1402 GTID工作原理

1、master更新數據時，會在事務前產生GTID，一同記錄到binlog日志中。2、slave端的i/o 線程將變更的binlog，寫入到本地的relay log中。3、sql線程從relay log中獲取GTID，然后對比slave端的binlog是否有記錄。4、如果有記錄，說明該GTID的事務已經執行，slave會忽略。5、如果沒有記錄，slave就會從relay log中執行該GTID的事務，并記錄到binlog。6、在解析過程中會判斷是否有主鍵，如果沒有就用二級索引，如果沒有就用全部掃描。

優點：

1.一個事務對應一個唯一GTID，一個GTID在一個服務器上只會執行一次2.GTID是用來代替傳統復制的方法，GTID復制與普通復制模式的最大不同就是不需要指定二進制文件名和位置3.減少手工干預和降低服務故障時間，當主機掛了之后通過軟件從眾多的備機中提升一臺備機為主機

缺點：

1.不支持非事務引擎2.不支持create table ... select 語句復制(主庫直接報錯)原理：（ 會生成兩個sql，一個是DDL創建表SQL，一個是insert into 插入數據的sql。由于DDL會導致自動提交，所以這個sql至少需要兩個GTID，但是GTID模式下，只能給這個sql生成一個GTID ）3.不允許一個SQL同時更新一個事務引擎表和非事務引擎表4.開啟GTID需要重啟（5.7除外）5.對于create temporary table 和 drop temporary table語句不支持6.不支持sql_slave_skip_counter

節點：server1 192.168.197.128 3306 Masterserver2 192.168.197.137 3306 Slaveserver3 192.168.197.136 3306 Slave

開啟GTID需要啟用這三個參數：

gtid_mode = on

enforce_gtid_consistency = 1

log_slave_updates = 1

搭建測試環境的步驟如下：

1.在主節點上創建復制用戶，開啟主節點的GTID選項;

mysql> grant replication slave on *.* to ’repluser’@’%’ identified by ’123456’;Query OK, 0 rows affected, 1 warning (0.00 sec)

2.從節點上進行change master to操作，搭建主從，如下：

mysql> change master to -> master_host=’192.168.197.128’, -> master_user=’repluser’, -> master_password=’123456’, -> master_port=3306, -> master_auto_position=1;Query OK, 0 rows affected, 2 warnings (0.01 sec)

3.搭建成功后，在主節點197.128上查看從節點是否加入：

mysql> show slave hosts;+-----------+------+------+-----------+--------------------------------------+| Server_id | Host | Port | Master_id | Slave_UUID |+-----------+------+------+-----------+--------------------------------------+| 3 | | 3306 | | 969488f5-c486-11e8-adb7-000c29bf2c97 || 2 | | 3306 | | bb874065-c485-11e8-8b52-000c2934472e |+-----------+------+------+-----------+--------------------------------------+ rows in set (. sec)

查看連接：

mysql> show processlist;+----+----------+------------------+------+------------------+------+---------------------------------------------------------------+------------------+| Id | User | Host | db | Command | Time | State | Info |+----+----------+------------------+------+------------------+------+---------------------------------------------------------------+------------------+| | root | localhost | NULL | Query | 0 | starting | show processlist || 3 | repluser | work_NAT_4:60051 | NULL | Binlog Dump GTID | | Master has sent all binlog to slave; waiting for more updates | NULL || | repluser | work_NAT_5: | NULL | Binlog Dump GTID | 5970 | Master has sent all binlog to slave; waiting for more updates | NULL |+----+----------+------------------+------+------------------+------+---------------------------------------------------------------+------------------+ rows in set (. sec)

4.三臺測試環境的UUID分別是：

197.128mysql> select @@server_uuid;+--------------------------------------+| @@server_uuid |+--------------------------------------+| bd0d-8691-11e8-afd6-4c3e51db5828 |+--------------------------------------+ row in set (0.00 sec)197.137mysql> select @@server_uuid;+--------------------------------------+| @@server_uuid |+--------------------------------------+| bb874065-c485-11e8-8b52-000c2934472e |+--------------------------------------+ row in set (0.00 sec)197.136mysql> select @@server_uuid;+--------------------------------------+| @@server_uuid |+--------------------------------------+| f5-c486-11e8-adb7-000c29bf2c97 |+--------------------------------------+ row in set (0.00 sec)05 開始測試

測試環境主要分為以下幾個方面：

a.測試復制的故障轉移

b.復制錯誤跳過

先來看看測試復制的故障轉移：

（1）首先將server 3的復制過程停掉

mysql> stop slave;Query OK, 0 rows affected (0.01 sec)

（2）在server 1上創建一些數據

mysql> create table yyy.a(id int);Query OK, 0 rows affected (0.03 sec)mysql> create table yyy.b(id int);Query OK, 0 rows affected (0.02 sec)mysql> create table yyy.c(id int);Query OK, 0 rows affected (0.02 sec)

（3）在另外兩臺上面查看數據結果：

server mysql> show tables from yyy;+---------------+| Tables_in_yyy |+---------------+| a || b || c |+---------------+ rows in set (0.00 sec)server mysql> show tables from yyy;Empty set (0.00 sec)

(4)此時可以發現，server 2 的數據相比較server 3，它的數據比較新，此時停止server 1，模擬主服務器宕機：

[root@work_NAT_1 init.d]# service mysqld stopShutting down MySQL............ [ OK ]

（5）此時我們發現其他兩個節點已經不能訪問server 1了

mysql> show slave statusG*************************** 1. row ***************************Slave_IO_State: Reconnecting after a failed master event read Master_Host: 192.168.197.128 Master_User: repluser Master_Port: 3306Connect_Retry: 60 Master_Log_File: mysql-bin.000006 Read_Master_Log_Pos: 1364Relay_Log_File: mysql-relay-bin.000004Relay_Log_Pos: 1569 Relay_Master_Log_File: mysql-bin.000006 Slave_IO_Running: Connecting Slave_SQL_Running: Yes Exec_Master_Log_Pos: 1364 Relay_Log_Space: 2337 Master_SSL_Key: Seconds_Behind_Master: NULLMaster_SSL_Verify_Server_Cert: NoLast_IO_Errno: 2003Last_IO_Error: error reconnecting to master ’repluser@192.168.197.128:3306’ - retry-time: 60 retries: 1Last_SQL_Errno: 0

（6）我們需要設置server 2為server 3的主庫，因為server 2的數據比較新。此時如果采用以前的辦法，需要計算之前主庫的log_pos和當前要設置成主庫的log_pos，很有可能出錯。所以出現了一些高可用性的工具如MHA，MMM等解決問題。

在MySQL5.6之后，很簡單的解決了這個難題。因為同一事務的GTID在所有節點上的值一致，那么根據server3當前停止點的GTID就能定位到server2上的GTID，所以直接在server3上執行change即可：

mysql> change master to -> master_host=’192.168.197.137’, -> master_user=’repluser’, -> master_password=’123456’, -> master_port=, -> master_auto_position=;Query OK, rows affected, warnings (0.01 sec)

（7）此時查看server 3上的數據，可以發現，數據已經同步過來了;

上面的測試中，最終的結果是server 2是主節點，server 3是從節點，下面我們來驗證復制錯誤跳過的辦法。

(1)首先我們在從節點上執行一個drop的語句，讓兩邊的數據不一致，如下：

mysql> show databases;+--------------------+| Database |+--------------------+| information_schema || DBAs|| customer || inc_db || mysql || performance_schema || sys|| testdb || yeyz|| yyy|+--------------------+ rows in set (. sec)mysql> drop database yyy;Query OK, rows affected (. sec)mysql> show databases;+--------------------+| Database |+--------------------+| information_schema || DBAs|| customer || inc_db || mysql || performance_schema || sys|| testdb || yeyz|+--------------------+ rows in set (. sec)

（2）然后我們在server 2上執行drop database yyy的操作，如下：

mysql> drop database yyy;Query OK, 3 rows affected (0.02 sec)

（3）此時我們看到server 3上已經出現了主從不同步的錯誤警告，因為它上面并沒有yyy的數據庫(前一步已經刪除)，錯誤情況如下;

mysql> show slave statusG*************************** . row ***************************Slave_IO_State: Waiting for master to send event Master_Host: 192.168.197.137 Master_User: repluser Master_Port: Connect_Retry:Master_Log_File: mysql-bin. Read_Master_Log_Pos: Relay_Log_File: mysql-relay-bin.Relay_Log_Pos: Relay_Master_Log_File: mysql-bin. Slave_IO_Running: Yes Slave_SQL_Running: No Last_Errno: Last_Error: Error ’Can’t drop database ’yyy’; database doesn’t exist’ on query. Default database: ’yyy’. Query: ’drop database yyy’ Skip_Counter: Exec_Master_Log_Pos:Relay_Log_Space: Last_SQL_Error: Error ’Can’t drop database ’yyy’; database doesn’t exist’ on query. Default database: ’yyy’. Query: ’drop database yyy’ Replicate_Ignore_Server_Ids:Master_Server_Id: Master_UUID: bb874065-c485-e8-b52-c2934472e Master_Info_File: mysql.slave_master_info Retrieved_Gtid_Set: bd0d--e8-afd6-c3e51db5828:-,bb874065-c485-e8-b52-c2934472e: Executed_Gtid_Set: db33b36-e51-f-a61d-c99756e90155:-,bd0d--e8-afd6-c3e51db5828:-,f5-c486-e8-adb7-c29bf2c97:Auto_Position: Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: row in set (0.00 sec)

(4)當我們使用傳統的方法來跳過這個錯誤的時候，會提示出GTID模式下不被允許，如下：

mysql> set global sql_slave_skip_counter=;ERROR (HY000): sql_slave_skip_counter can not be set when the server is running with @@GLOBAL.GTID_MODE = ON. Instead, for each transaction that you want to skip, generate an empty transaction with the same GTID as the transaction

那么這種方式下應該如何跳過這個錯誤呢？

(5)因為我們是通過GTID來進行復制的，也需要跳過這個事務從而繼續復制，這個事務可以到主上的binlog里面查看：因為不知道找哪個GTID上出錯，所以也不知道如何跳過哪個GTID。但是我們可以在show slave status里的信息里找到在執行Master里的POS:2012，也就是上述第(3)步第18行代碼?，F在我們拿著這個pos:2012去server 2的日志里面找，可以發現如下信息：

# at 2012#190305 20:59:07 server id 2 end_log_pos 2073 GTID last_committed=9 sequence_number=10 rbr_only=noSET @@SESSION.GTID_NEXT= ’bb874065-c485-11e8-8b52-000c2934472e:1’/*!*/;# at 2073#190305 20:59:07 server id 2 end_log_pos 2158 Query thread_id=3 exec_time=0 error_code=0SET TIMESTAMP=/*!*/;drop database yyy/*!*/;

（6）我們可以看到GTID_NEXT的值是

，然后我們通過下面的方法來重新恢復主從復制：

mysql> stop slave;Query OK, rows affected (0.00 sec)mysql> set session gtid_next=’bb874065-c485-11e8-8b52-000c2934472e:1’;Query OK, rows affected (0.00 sec)mysql> begin;Query OK, rows affected (0.00 sec)mysql> commit;Query OK, rows affected (0.01 sec)mysql> set session gtid_next=automatic;Query OK, rows affected (0.00 sec)mysql> start slave;Query OK, rows affected (0.00 sec)mysql> show slave statusG*************************** 1. row ***************************Slave_IO_State: Waiting for master to send event Master_Host: 192.168.197.137 Master_User: repluser Master_Port: 3306Connect_Retry: 60 Master_Log_File: mysql-bin.000002 Read_Master_Log_Pos: 2158Relay_Log_File: mysql-relay-bin.000003Relay_Log_Pos: 478 Relay_Master_Log_File: mysql-bin.000002 Slave_IO_Running: Yes Slave_SQL_Running: Yes Exec_Master_Log_Pos: 2158 Relay_Log_Space: 1527 Until_Condition: None Master_Server_Id: 2 Master_UUID: bb874065-c485-11e8-8b52-000c2934472e Master_Info_File: mysql.slave_master_info SQL_Delay: 0 SQL_Remaining_Delay: NULL Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates Master_Retry_Count: Retrieved_Gtid_Set: bd0d-8691-11e8-afd6-4c3e51db5828:-7,bb874065-c485-11e8-8b52-000c2934472e: Executed_Gtid_Set: db33b36-0e51-409f-a61d-c99756e90155:-14,bd0d-8691-11e8-afd6-4c3e51db5828:-7,f5-c486-11e8-adb7-000c29bf2c97:,bb874065-c485-11e8-8b52-000c2934472e:Auto_Position: Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: row in set (0.00 sec)

以上就是MySQL GTID全面總結的詳細內容，更多關于MySQL GTID的資料請關注好吧啦網其它相關文章！