[转]微服务轮子项目(27) -MySQL 主从复制、主从切换、主主复制
文章目录
- 1. 主从复制
- 1.1 主库安装
- 1.1.1 创建配置文件
- 1.1.2 启动主库
- 1.1.3 主库创建用于同步的账号
- 1.2 从库安装
- 1.2.1 创建配置文件
- 1.2.2 启动从库
- 1.2.3 关联主库
- 1.2.4 启动并查看slave
- 1.2.5 创建从库的普通用户
- 1.3 主库查看同步信息
- 2. 主从切换
- 2.1 对主库进行锁表
- 2.2 检查master同步状态
- 2.3 检查slave同步状态
- 2.4 提升slave为master
- 2.5 将原来master变为slave
- 3. 主主复制
- 3.1 主库配置文件
- 3.2 第二主库配置文件
- 3.3 总结
1. 主从复制
1.1 主库安装
1.1.1 创建配置文件
1.创建目录
mkdir -p /opt/mysql/master/conf
2.创建my.cnf
文件
vim /opt/mysql/master/conf/my.cnf
内容如下:
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
[mysqld]
collation-server = utf8_unicode_ci
init-connect='SET NAMES utf8'
character-set-server = utf8
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
datadir = /var/lib/mysql
secure-file-priv= NULL
symbolic-links=0
skip-character-set-client-handshakebinlog_format=ROW
binlog_rows_query_log_events=1
server_id = 1
log-bin= mysql-bin
gtid_mode=on
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
relay_log_recovery=ON
sync_master_info=1
binlog_checksum=CRC32slave-parallel-type=LOGICAL_CLOCK
slave_parallel_workers=4
binlog_transaction_dependency_tracking=WRITESET_SESSION
transaction_write_set_extraction=XXHASH64transaction-isolation=READ-COMMITTED
read-only=0
replicate-ignore-db=mysql
replicate-ignore-db=sys
replicate-ignore-db=information_schema
replicate-ignore-db=performance_schema
expire_logs_days=30max_connections=3600# Custom config should go here
!includedir /etc/mysql/conf.d/
备注:
skip-character-set-client-handshake
:忽略应用程序想要设置的其他字符集
binlog_format
:为设置binlog格式
binlog_rows_query_log_events
:在row模式下开启该参数,将把sql语句打印到binlog日志里面,默认是0(off);
server_id
:这个的值必需所有mysql实例都不重复 log-bin:binlog的名称
gtid_mode
:开启GTID,用来代替classic的复制方法
enforce_gtid_consistency
:开启gtid的一些安全限制,阻止不安全的语句执行
master_info_repository=table和relay_log_info_repository=table:master.info和relay.info保存在表中
relay_log_recovery
:当slave从库宕机后,假如relay-log损坏了,导致一部分中继日志没有处理,则自动放弃所有未执行的relay-log,并且重新从master上获取日志,这样就保证了relay-log的完整性
sync_master_info
:每个事务都会刷新master.info binlog_checksum:默认为NONE,表示在图1的箭头1 不生成checksum, 这样就可以兼容旧版本的mysql。 此外,就只能设置为CRC32了
slave-parallel-type
:DATABASE为默认值,基于库的并行复制方式;LOGICAL_CLOCK基于组提交的并行复制方式
slave_parallel_workers
:设置多少个SQL Thread(coordinator线程)来进行并行复制
binlog_transaction_dependency_tracking
:控制是否使用WRITESET策略,WRITESET_SESSION是在写集合的基础上增加约束,保证按照前后顺序执行
transaction_write_set_extraction
:控制检测事务依赖关系时采用的HASH算法
transaction-isolation
:事务隔离级别 read-only:是否只读,0为否,1为是
replicate-ignore-db
:配置忽略同步的数据库 expire_logs_days:binlog日志过期时间,默认不过期
max_connections
:mysql最大连接数
1.1.2 启动主库
1.创建启动命令
vim /opt/mysql/master/start.sh
内容如下:
MYSQL_DIR=/opt/mysql/master
docker stop mysql-m
docker rm mysql-m
docker run -d \-p 3306:3306 \--name mysql-m \-v ${MYSQL_DIR}/conf/my.cnf:/etc/mysql/my.cnf \-v ${MYSQL_DIR}/data/mysql:/var/lib/mysql \-v ${MYSQL_DIR}/log:/opt/mysql/log \-e MYSQL_ROOT_PASSWORD=1q2w3e4r \mysql:5.7.25
MYSQL_ROOT_PASSWORD
:为root账号的登录密码
1.1.3 主库创建用于同步的账号
1.登录进主库
## 进去docker容器内
docker exec -it mysql-m bash## 登录mysql数据库
mysql -uroot -p1q2w3e4r
2.创建backup账号
GRANT REPLICATION SLAVE ON *.* to 'backup'@'%' identified by '123456';
1.2 从库安装
进入从库的服务器执行以下操作,建议是不同于主库的服务器,如果服务器相同需要修改
3306
端口为其他的值。
1.2.1 创建配置文件
创建目录
mkdir -p /opt/mysql/slave/conf
创建my.cnf
文件
vim /opt/mysql/slave/conf/my.cnf
内容如下:
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
[mysqld]
collation-server = utf8_unicode_ci
init-connect='SET NAMES utf8'
character-set-server = utf8
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
datadir = /var/lib/mysql
secure-file-priv= NULL
symbolic-links=0
skip-character-set-client-handshakebinlog_format=ROW
binlog_rows_query_log_events=1
server_id = 2
log-bin= mysql-bin
gtid_mode=on
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
relay_log_recovery=ON
sync_master_info=1
binlog_checksum=CRC32slave-parallel-type=LOGICAL_CLOCK
slave_parallel_workers=4binlog_transaction_dependency_tracking=WRITESET_SESSION
transaction_write_set_extraction=XXHASH64transaction-isolation=READ-COMMITTED
read-only=1
replicate-ignore-db=mysql
replicate-ignore-db=sys
replicate-ignore-db=information_schema
replicate-ignore-db=performance_schema
expire_logs_days=30max_connections=3600# Custom config should go here
!includedir /etc/mysql/conf.d/
不同于主库的配置如下:
server_id
:设为2
read-only
:设为只读
1.2.2 启动从库
创建启动命令
vim /opt/mysql/slave/start.sh
内容如下:
MYSQL_DIR=/opt/mysql/slave
docker stop mysql-s
docker rm mysql-s
docker run -d \-p 3306:3306 \--name mysql-m \-v ${MYSQL_DIR}/conf/my.cnf:/etc/mysql/my.cnf \-v ${MYSQL_DIR}/data/mysql:/var/lib/mysql \-v ${MYSQL_DIR}/log:/opt/mysql/log \-e MYSQL_ROOT_PASSWORD=1q2w3e4r \mysql:5.7.25
1.2.3 关联主库
1.登录进从库
## 进去docker容器内
docker exec -it mysql-s bash## 登录mysql数据库
mysql -uroot -p1q2w3e4r
2.执行关联master语句
change master to master_host='192.168.28.130',master_port=3306,master_user='backup',master_password='123456',MASTER_AUTO_POSITION=1;
master_host
:为主库ip
master_port
:主库端口
master_user
:主库用于同步的帐号
master_password
:主库用于同步的帐号密码
master_auto_position
:slave连接master将使用基于GTID的复制协议
1.2.4 启动并查看slave
## 启动slave
start slave;## 查看slave的状态
show slave status\G
Slave_IO_Running
和Slave_SQL_Running
都为Yes就代表配置成功了
Seconds_Behind_Master
:为主从延时(ms)
1.2.5 创建从库的普通用户
read_only=1
只读模式,可以限定普通用户进行数据修改的操作,但不会限定具有super
权限的用户(如超级管理员root
用户)的数据修改操作,所以需要另外创建普通账号来操作从库。
GRANT select,insert,update,delete,create,drop,alter ON *.* to 'zlt'@'%' identified by '1q2w3e4r';
1.3 主库查看同步信息
登录主库,查看binlog线程,执行以下语句查看正在执行的线程:
show processlist;
show slave hosts;
2. 主从切换
2.1 对主库进行锁表
flush tables with read lock;
在
flush tables with read lock
成功获得锁之前,必须等待所有语句执行完成(包括SELECT
)。所以如果有个慢查询在执行,或者一个打开的事务,或者其他进程拿着表锁,flush tables with read lock
就会被阻塞,直到所有的锁被释放。
2.2 检查master同步状态
show processlist;
如果显示
Master has sent all binlog to slave; waiting for more updates
,则可以执行下一步了,否则需要等待
2.3 检查slave同步状态
show processlist;
确保显示为
Slave has read all relay log; waiting for more updates
2.4 提升slave为master
stop slave;
reset master;
reset slave all;
reset slave all
命令会删除从库的replication
参数,之后show slave status\G
的信息返回为空。
2.创建同步用户,在从库执行
GRANT REPLICATION SLAVE ON *.* to 'backup'@'%' identified by '123456';
3.修改配置并重启
- 修改从库的
my.cnf
文件,将read-only
的值改为0并重启mysql
2.5 将原来master变为slave
reset master;reset slave;change master to master_host='192.168.28.130',master_port=3306,master_user='backup',master_password='123456',MASTER_AUTO_POSITION=1;start slave;
## 在主库下执行
show slave status\G
Slave_IO_Running
和Slave_SQL_Running
都显示Yes
就代表成功了
3. 主主复制
3.1 主库配置文件
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
[mysqld]
collation-server = utf8_unicode_ci
init-connect='SET NAMES utf8'
character-set-server = utf8
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
datadir = /var/lib/mysql
secure-file-priv= NULL
symbolic-links=0
skip-character-set-client-handshakebinlog_format=ROW
binlog_rows_query_log_events=1
server_id = 1
log-bin= mysql-bin
gtid_mode=on
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
relay_log_recovery=ON
sync_master_info=1
binlog_checksum=CRC32slave-parallel-type=LOGICAL_CLOCK
slave_parallel_workers=4binlog_transaction_dependency_tracking=WRITESET_SESSION
transaction_write_set_extraction=XXHASH64transaction-isolation=READ-COMMITTED
read-only=0
replicate-ignore-db=mysql
replicate-ignore-db=sys
replicate-ignore-db=information_schema
replicate-ignore-db=performance_schema
slave-skip-errors=all
expire_logs_days=30max_connections=3600auto_increment_offset = 1
auto_increment_increment = 2# Custom config should go here
!includedir /etc/mysql/conf.d/
3.2 第二主库配置文件
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
[mysqld]
collation-server = utf8_unicode_ci
init-connect='SET NAMES utf8'
character-set-server = utf8
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
datadir = /var/lib/mysql
secure-file-priv= NULL
symbolic-links=0
skip-character-set-client-handshakebinlog_format=ROW
binlog_rows_query_log_events=1
server_id = 2
log-bin= mysql-bin
gtid_mode=on
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
relay_log_recovery=ON
sync_master_info=1
binlog_checksum=CRC32slave-parallel-type=LOGICAL_CLOCK
slave_parallel_workers=4binlog_transaction_dependency_tracking=WRITESET_SESSION
transaction_write_set_extraction=XXHASH64transaction-isolation=READ-COMMITTED
read-only=0
replicate-ignore-db=mysql
replicate-ignore-db=sys
replicate-ignore-db=information_schema
replicate-ignore-db=performance_schema
slave-skip-errors=all
expire_logs_days=30max_connections=3600auto_increment_offset = 2
auto_increment_increment = 2# Custom config should go here
!includedir /etc/mysql/conf.d/
3.3 总结
- 两个库的
read-only
都为0
,同为可写可读 - 新增
auto_increment_offset
和auto_increment_increment
参数,并且两个库的auto_increment_offset
值不相同
[转]微服务轮子项目(27) -MySQL 主从复制、主从切换、主主复制相关推荐
- 微服务轮子项目(53) -理论小结
文章目录 1. 概述 2. 基础知识 2.1 整体架构 2.2 分布式事务 2.3 Sentinel限流熔断 3. 架构设计 3.1 服务认证架构设计 3.2 日志架构设计 3.3 监控架构设计 3. ...
- 微服务轮子项目(45) -Jenkins自动化部署
文章目录 1. 安装部署 1.1 环境准备 1.2 启动与访问 1.3 插件安装 1.4 全局工具配置 1.5 安全配置 1.6 踩坑 2. ssh免密登录 2.1 获取本地客户端机器的公钥 2.2 ...
- 微服务轮子项目(49) -常见JVM内存错误及解决方案
文章目录 1. Java heap space 1.1 原因分析 1.2 解决方案 2. GC overhead limit exceeded 3. Permgen space 3.1 原因分析 3. ...
- guns 最新开源框架企业版下载_国内比较火的5款Java微服务开源项目
本文介绍国内比较火的5款Java微服务开源项目,pig是基于Spring Cloud.OAuth2.0.Vue的前后端分离的系统. 通用RBAC权限设计及其数据权限和分库分表 支持服务限流.动态路由. ...
- 国内最火5款Java微服务开源项目
国内最火5款Java微服务开源项目 目录 1.pig 2.zheng 3.Cloud-Platform 4.SpringBlade 5.Guns PIG 开源地址:https://gitee.com/ ...
- 阿里巴巴微服务开源项目盘点
文章目录 阿里巴巴微服务开源项目盘点 1.Apache Dubbo 2.Apache RocketMQ 3.OpenMessaging 4.Nacos 5.Sentinel 6.Arthas 7.Sp ...
- 企业开发必备的6个Spring Cloud微服务开源项目
前言 今天介绍六款比较热门的SpringCloud微服务项目,感兴趣的可以clone下来研究一下,相信对你学习微服务架构很有帮助.一键获取源码地址 一.Cloud-Platform 介绍 Cloud- ...
- 班级管理系统的后端微服务demo项目
Overview 参考: [编程不良人]微服务小项目实战 班级管理系统: 该项目是学习微服务时的一个demo项目,只具备后端功能,且因为服务的功能和代码极其相似,最后两个服务没有开发完成.文档尽可能事 ...
- 腾讯微服务开源项目再摘信通院OSCAR开源大奖
10月16日,由中国信息通信研究院主办.云计算标准和开源推进委员会承办的2020开源产业大会正式开幕,腾讯微服务开源项目再摘信通院OSCAR开源大奖. 2020年OSCAR开源尖峰案例名单在会上正式发 ...
最新文章
- Android呼叫开发系列WebService
- Tomcat设置Http自动跳转Https
- 0040 Java学习笔记-多线程-线程run()方法中的异常
- linux下面mysql不监听3306
- android开发中eclipse里xml开发的自动提示和使用帮助快捷键提示
- 【LeetCode】剑指 Offer 56. 数组中数字出现的次数
- 一行Python代码统计词频
- PHPInfo()信息泄漏——综合利用提权
- idea maven工程显示灰色(不亮)
- 【备战NOIP】[算法总结] 二分查找
- Go的50坑:新Golang开发者要注意的陷阱、技巧和常见错误[1]
- 矩池云安装报E: Could not get lock /var/lib/dpkg/lock-frontend - open (11: Resource temporarly unavailable)
- bzoj 4568: [Scoi2016]幸运数字(树上倍增+线性基)
- 图书管理系统(一):出版社列表增加、删除和编辑
- 4.ES 相关插件安装
- 常用的MySQL命令大全(完整版、太到位了)
- 烧烤摊如何走O2O之路 微博微信运营案例分享
- 团队项目(小小大佬带飞队)
- js 监听键盘的enter键
- Ubuntu16.04安装vscode,并修改为简体中文版,设置显示空格和tab,汉字或者汉字的标点带黄色框