基于GTID模式MySQL主从复制

GTID复制原理:
基于GTID的复制是MySQL 5.6后新增的复制方式
GTID (global transaction identifier) 即全局事务ID, 保证了在每个在主库上提交的事务在集群中有一个唯一的ID.
在原来基于日志的复制中, 从库需要告知主库要从哪个偏移量position进行增量同步, 如果指定错误会造成数据的遗漏, 从而造成数据的不一致.
而基于GTID的复制中, 从库会告知主库已经执行的事务的GTID的值, 然后主库会将所有未执行的事务的GTID的列表返回给从库. 并且可以保证同一个事务只在指定的从库执行一次.

GTID是由server_uuid和事务id组成,格式为:GTID=server_uuid:transaction_id。server_uuid是在数据库启动过程中自动生成,每台机器的server-uuid不一样。
uuid存放在数据目录的auto.conf文件中,而transaction_id就是事务提交时系统顺序分配的一个不会重复的序列号。

GTID的好处:

(1)GTID使用master_auto_position=1代替了binlog和position号的主从复制搭建方式,相比binlog和position方式更容易搭建主从复制。
(2)GTID方便实现主从之间的failover,不用一步一步的去查找position和binlog文件。

GTID模式复制搭建过程中注意事项:
主从需要设置如下参数(一般直接在配置文件/etc/my.cnf下直接添加):

a、主库配置:

gtid_mode=on
enforce_gtid_consistency=on
log_bin=on
server-id=33062200(主从不能相同)
binlog_format=row

b、从库配置:

gtid_mode=on
enforce_gtid_consistency=on
log_slave_updates=1
server-id=33062211(主从不能相同)

开启GTID需要启用这三个参数:

#GTID
gtid_mode = on
enforce_gtid_consistency = 1
log_slave_updates   = 1

主库上操作:

root@sakila 15:10: [mysql]>create user 'repluser'@'192.168.112.%' identified by 'xxxxxx';
root@sakila 15:10: [mysql]> grant replication slave on *.* to 'repluser'@'192.168.112.%';

主库逻辑备份:
mysqldump -uroot -hlocalhost -p --single-transaction --master-data=2 -A >all.sql
从库上操作:将主库上导出的all.sql导入从库
mysql -uroot -hlocalhost -p <all.sql

如果出现如下错误:
ERROR 1840 (HY000) at line 24: @@GLOBAL.GTID_PURGED can only be set when @@GLOBAL.GTID_EXECUTED is empty.
则在从库命令行下执行:reset master
root@sakila 15:20:[mysql]> reset master;
跟普通模式一样,执行change master语句,只不过其中的binlog和position换成master_auto_position=1

CHANGE MASTER TO
MASTER_HOST='192.168.112.220',
MASTER_USER='repluser',
MASTER_PASSWORD='xxxxxx',
MASTER_PORT=3306,
MASTER_AUTO_POSITION=1;

启动slave复制服务
start slave;

查看主从复制状态:
root@sakila 15:23:  [mysql]> show slave status\G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.112.220Master_User: repluserMaster_Port: 3306Connect_Retry: 60Master_Log_File: on.000002Read_Master_Log_Pos: 2538363Relay_Log_File: localhost-relay-bin.000004Relay_Log_Pos: 2031371Relay_Master_Log_File: on.000002Slave_IO_Running: YesSlave_SQL_Running: YesReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0Last_Error: Skip_Counter: 0Exec_Master_Log_Pos: 2538363Relay_Log_Space: 2031582Until_Condition: NoneUntil_Log_File: Until_Log_Pos: 0Master_SSL_Allowed: NoMaster_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: NoLast_IO_Errno: 0Last_IO_Error: Last_SQL_Errno: 0Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 33060220Master_UUID: 763c7ef3-5977-11e8-ae7a-000c2936b80fMaster_Info_File: mysql.slave_master_infoSQL_Delay: 0SQL_Remaining_Delay: NULLSlave_SQL_Running_State: Slave has read all relay log; waiting for more updatesMaster_Retry_Count: 86400Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: 763c7ef3-5977-11e8-ae7a-000c2936b80f:1393-6926Executed_Gtid_Set: 763c7ef3-5977-11e8-ae7a-000c2936b80f:1-6926Auto_Position: 1Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version:
1 row in set (0.00 sec)

查主从状态

有上图可知:
Slave_IO_Running: Yes
lave_SQL_Running: Yes

复制主从复制状态OK,进一步查看通过Executed_Gtid_Set查看执行过的GTID:
root@sakila 15:38: [mysql]> show master status;
+-----------+----------+--------------+------------------+---------------------------------------------+
| File | Position | Binlog_Do_sakila | Binlog_Ignore_sakila | Executed_Gtid_Set |
+-----------+----------+--------------+------------------+---------------------------------------------+
| on.000002 | 3200431 | | | 763c7ef3-5977-11e8-ae7a-000c2936b80f:1-8730 |
+-----------+----------+--------------+------------------+---------------------------------------------+
1 row in set (0.00 sec)

root@sakila 15:38: [mysql]>
在MySQL5.7版本之后,gtid_executed这个值持久化了,在MySQL库下新增了一张表gtid_executed
root@sakila 15:38: [mysql]> desc gtid_executed;
+----------------+------------+------+-----+---------+-------+
| Field | Type | Null | Key | Default | Extra |
+----------------+------------+------+-----+---------+-------+
| source_uuid | char(36) | NO | PRI | NULL | |
| interval_start | bigint(20) | NO | PRI | NULL | |
| interval_end | bigint(20) | NO | | NULL | |
+----------------+------------+------+-----+---------+-------+
3 rows in set (0.00 sec)

root@sakila 15:41: [mysql]> select * from gtid_executed;
+--------------------------------------+----------------+--------------+
| source_uuid | interval_start | interval_end |
+--------------------------------------+----------------+--------------+
| 763c7ef3-5977-11e8-ae7a-000c2936b80f | 1 | 6 |
+--------------------------------------+----------------+--------------+
1 row in set (0.00 sec)

该表会记录执行的GTID集合信息,因为有了该表,就不用再像MySQL 5.6版本时,必须开启log_slave_updates参数,从库才可以进行赋值。
GTID信息会保存在gtid_executed表中,可以关闭从库的binlog,节约binlog的记录开销。在执行reset master时,会清空表内所有的数据。
而MySQL 5.7还有一个参数gtid_executed_compresssion_period参数,用来控制gtid_executed表的压缩,该参数默认值为1000,意思是表压缩在执行完1000个事务之后开始。

root@sakila 15:47: [mysql]> show variables like '%gtid_executed%';
+----------------------------------+-------+
| Variable_name | Value |
+----------------------------------+-------+
| gtid_executed_compression_period | 1000 |
+----------------------------------+-------+
1 row in set (0.00 sec)
从MySQL5.7.6开始,gid_mode支持动态修改,gtid_mode可取值为:

OFF-------不支持GTID事务
OFF_PERMISSIVE----新的事务是匿名的,同时允许复制的事务可以是GTID,也可以是匿名的
ON_PERMISSIVE---- 新的事务使用GTID,同时允许复制的事务可以是GTID,也可以是匿名的
ON------支持GITD的事务

在线上环境中,有可能把传统复制改为GTID的复制模式的需求,这里特意强调一点,gtid_mode虽然支持动态修改,但不支持跳跃式修改。

另外在从库上可以执行show slave status命令来获取接收的gtid(retrieve_gtid_set)和执行的gtid(execute_gtid_set)
[root@localhost mysql]# mysql -uroot -hlocalhost -pxxxxxx -e "use mysql;show slave status\G;"|grep "Gtid_Set"
Retrieved_Gtid_Set: 763c7ef3-5977-11e8-ae7a-000c2936b80f:1393-10758
Executed_Gtid_Set: 763c7ef3-5977-11e8-ae7a-000c2936b80f:1-10758

SQL线程执行过的GTID(Executed_Gtid_Set)

IO线程获取到的GTID(Retrieved_Gtid_Set)

GTID模式复制局限性:

(1)不能使用create table table_name select * from table_name模式的语句
(2)在一个事务中既包含事务表的操作又包含非事务表
(3)不支持CREATE TEMPORARY TABLE or DROP TEMPORARY TABLE语句操作
(4)使用GTID复制从库跳过错误时,不支持sql_slave_skip_counter参数的语法

参考:http://www.cnblogs.com/kindnull/p/9051358.html

转载于:https://www.cnblogs.com/elontian/p/9493826.html

基于GTID模式MySQL主从复制相关推荐

  1. mysql 主从复制 和基于gtid的mysql主从复制

    主从复制 原理: mysql 无需借助第三方工具,而是其自带的同步复制功能,另外一点,mysql 的主从 复制并不是从硬盘给上文件直接同步,而是逻辑的 binlog 日志同步到本地的应用执行的过 程. ...

  2. 【MySQL】基于Docker的Mysql主从复制搭建

    基于Docker的Mysql主从复制搭建 为什么基于Docker搭建? 资源有限 虚拟机搭建对机器配置有要求,并且安装mysql步骤繁琐 一台机器上可以运行多个Docker容器 Docker容器之间相 ...

  3. mysql主从备份 ssl_基于SSL的mysql主从复制

    基于SSL的mysql主从复制 [背景] MySQL的协议是明文的,当复制一些重要数据时.有时需要用到SSL功能,以保证数据的安全性. [准备] 准备前期准备 一.主从时间一致性 [root@node ...

  4. 基于 Gtid 的 MySQL 主从同步实践

    点击下方公众号「关注」和「星标」 回复"1024"获取独家整理的学习资料! 前几天,有读者在后台留言问我可有基于Gtid的Mysql主从同步的文章,我记得历史文章应该有提及过,也有 ...

  5. MySQL 5.7基于GTID及多线程主从复制

    点击上方"朱小厮的博客",选择"设为星标" 后台回复"1024"领取公众号专属资料 来源:rrd.me/gDJDK MySQL主从同步原理 ...

  6. 基于Docker的Mysql主从复制搭建_mysql5.7.x

    文章目录 为什么基于Docker搭建? 一.拉取镜像创建容器 1. 拉取mysql:5.7镜像 2. 创建master容器 3. 创建slave容器 4. 查看正在运行的容器 5. 此时可以使用Nav ...

  7. 迅猛快捷——基于Gtid搭建Mysql主从,gtid实现主从切换自动同步——@$23$人鱼的眼泪

    mysql基于Gtid做主从 环境准备 1. 安装mysql5.7 如果没安装wget,先安装wget 首先获取5.7的包 2.修改配置文件 [主] [从] 主从都执行重启,使配置文件生效 3.查看初 ...

  8. 【MySQL】Spring Boot项目基于Sharding-JDBC和MySQL主从复制实现读写分离(8千字详细教程)

    目录 前言 一. 介绍 二. 主从复制 1. 原理 2. 克隆从机 3. 克隆从机大坑 4. 远程登陆 5. 主机配置 6. 从机配置 7. 主机:建立账户并授权 8. 从机:配置需要复制的主机 9. ...

  9. 基于Docker部署Mysql主从复制-实战详解篇

    一.前言 MySQL的主从复制详细讲解,根据网上教程也踩了很多坑,浪费了一些时间 ,特地全面的梳理下基于docker构建的mysql主从复制构建过程.遇到的问题以及提供安装包样例等 希望一篇文章足以解 ...

最新文章

  1. 【小知识】为什么负数除二和右移一位的结果不一样?
  2. linux 挂载u盘
  3. gitlab与jenkins的自动化部署(通过webhook与ansible)
  4. 静态链接库和动态链接库(转)
  5. 画架构图的软件_程序员为什么要学会画技术架构图?
  6. 神经网络训练集的图片到底是如何相互作用的?
  7. 泡泡提示加强版 完美支持XHTML(JavaScript)--zhuan
  8. php $db-gt;query 行数,php – 如何在CodeIgniter中组合query()和limit()方法
  9. Eclips下运行helloworld,弹出手机模拟器上什么也没有
  10. 第八届蓝桥杯第十题 k倍区间
  11. python学习笔记4-切片
  12. java朴素贝叶斯_java实现朴素贝叶斯算法
  13. k2路由器改无线打印服务器,修改斐讯K2、K3路由器的无线密码【图解】
  14. HTG评论Yoga Tablet 2 Pro:内置Pico投影仪可延长电池寿命
  15. 逍遥天龙八部服务器技能修改,泣诉天龙八部3逍遥三大难 技能修改势在必行
  16. 优达笔记-安然数据分析 异常值处理
  17. Spanning Tree协议安全攻防
  18. 西门子SMART 200 modbus rtu通讯宇电温控器例程 运行/停止的控制及指示;温度设定,上下限报警设定
  19. English # 英语学习第一天(audience)
  20. matlab的imshow python中cv2.imshow及plt.imshow相关测试

热门文章

  1. 设计模式之访问者模式(Visitor)摘录
  2. 【Qt】QStackedWidget:将多个窗口控件放入堆中,每次只显示一个窗口控件
  3. 【Qt】在Ubuntu16.04中安装QSerialPort模块
  4. 【Ubuntu】将Ubuntu的源改为国内源
  5. 【Qt】调用Python函数:无参数、单个参数、多个参数、数组参数
  6. java写exe程序实例,java实现可安装的exe程序实例详解
  7. python的id方法_python中id()函数的实用研究实例
  8. java 泛型对象实例化_在java中实例化泛型类型
  9. python与anaconda区别_anaconda和python的区别是什么?
  10. python技术晨讲_python系列教程14