mysql5.7基于GTID实现主从复制

mysql5.7基于GTID实现主从复制
一．GTID概述1.1 GTID的概念
GTID，全局事务ID globaltransaction identifiers
GTID是一个事务对应一个全局唯一ID,随事务记录到binlog中，用来标识事务。
GTID 对应事务在一个服务器上只执行一次，避免重复执行导致数据不一致。
GTID 用来代替传统的复制方法，不再使用传统的MASTER_LOG_FILE+ MASTER_LOG_POS，而是使用MASTER_AUTO+POSTION=1的方式
每个事务有一个Gtid_log_event
1.2 GTID的构成
UUID+Sequence Number
Sequence Number是MySQL服务器内部的一个事务顺序号.一个MySQL服务器上的事务不会有重复的顺序号(保证服务器内唯一)。
每个MySQL服务器有一个全局唯一的UUID.

1.3 GTID优势
1. 简化复制的使用过程和降低复制集群的维护难度。
2. 比传统的复制更能保证数据一致性
1.4 GTID的工作原理
1. 当一个事务在主库端执行并提交时，产生GTID，一同记录到binlog日志中。
2. Slave连接到Master时，会把gtid_executed中的gtid发给Master。Master会自动跳过这些事务，只将没有复制的事物发送到Slave上。
3. binlog传输到slave,并存储到slave的relaylog后，读取这个GTID的这个值设置gtid_next变量，即告诉Slave，下一个要执行的GTID值。
4. sql线程从relay log中获取GTID，然后对比slave端的binlog是否有该GTID。
5. 如果有记录，说明该GTID的事务已经执行，slave会忽略。
6. 如果没有记录，slave就会执行该GTID事务，并记录该GTID到自身的binlog，
7. 在读取执行事务前会先检查其他session持有该GTID，确保不被重复执行。
8. 在解析过程中会判断是否有主键，如果没有就用二级索引，如果没有就用全部扫描。
1.5 GTID在线启用条件
1. 新系统搭建时直接开启GTID功能。
2. 老系统需升级至mysql5.7后，开启GTID功能。
二．新搭建主从，基于GTID实现
主库：
修改vim /etc/my.cnf
#gtid
server_id=1 #主库与从库不能重复
gtid_mode=on，开启gtid模式
enforce_gtid_consistency=on #参数值包括off（不检测是否有GTID不支持的语句或事物）,warn(当发现有支持的语句或事务时，返回警告，并记到日志中),on（当发现语句或事物不支持GTID时，返回错误）建议在启用GTID时，在测试环境中开始此参数，处理完GTID不支持的语句后，再启用GTID。
#binlog
log_bin=master-binlog #开启binlog
log-slave-updates=1
binlog_format=row #建议复制时开启row模式

#relay log
#skip_slave_start=1

从库：
修改vim /etc/my.cnf
#gtid
server_id=2 #主库与从库不能重复
gtid_mode=on，开启gtid模式
#binlog
log_bin=master-binlog #开启binlog，注意5.7版本以后可以不开启binlog了，可以节省空间提高性能，5.6版本必须开启binlog,因为GTID存储在binlog中，只有开启binlog才能使用GTID的功能。5.7中通过GTID系统表来记录GITD(表mysql.gtid.executed)，每个事务提交时，将GTID插入到表中。
log-slave-updates=1
binlog_format=row #建议复制时开启row模式

#relay log
#skip_slave_start=1

二．在线将传统复制模式变更为基于GTID复制的步骤
1. master和slave上分别执行
set@@global.enforce_gtid_consistency=warn;
查看错误日志中是否有错误信息
tail -fmysql-master.err
2. master和slave上分别执行
set@@global.enforce_gtid_consistency=on;
3. master和slave上分别设置GTID模式：
set@@global.gtid_mode=off_permissive;
查看主从错误日志中是否有错误信息
tail -fmysql-master.err
4. master和slave上分别执行
set @@global.gtid_mode=on_permissive;
5. 检查是否还有基于传统复制的信息
mysql> show status like 'ongoing_anonymouse_transcation_count';
Empty set (0.00 sec) #如果为空表示没有问题
6. master和slave上分别执行
set@@global.gtid_mode=on;
mysql> show variables like 'gtid_mode';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| gtid_mode | ON |
+---------------+-------+
7. 在slave上执行：
stop slave;
change master tomaster_auto_position=1;
start slave
show slave status\G;
8. 将以下两个参数加入到my.cnf中，以便重启时生效
gtid_mode=on
enforce_gtid_consistency=on
四．在线将基于GTID复制变更为传统模式的复制
1. master服务器
show master status; #查看master的日志文件及位置点
2. slave服务器
stop slave;
change master to master_auto_position=0, master_log_file='master-binlog.000004',master_log_pos=194;
start slave;
3. master 和slave 上分别执行
set @@global.gtid_mode=on_permissive;
set @@global.gtid_mode=off_permissive;
select @@global.gtid_owned;#master和slave全为空字符串时执行下面操作

set @@global.gtid_mode=off;
enforce_gtid_consistency=off;
4. slave上执行，查看复制状态
show slave status\G;
5. 在my.cnf中，修改
gtid_mode=off
enforce_gtid_consistency=off