mysql 主从复制原理【转】
- 主从复制的用途及条件
- 主从部署形式
- 主从复制实现原理
- 主从复制方式(强同步、半同步、异步、并行复制)
- 其他问题
- 部分数据复制
- 级联复制
- 复制监控
- 复制出错处理
1.用途及条件
- 实时灾备,用于故障切换
- 读写分离,提供查询服务
- 备份,避免影响业务
- 主库开启binlog日志(设置log-bin参数)
- 主从server-id不同
- 从库服务器能连通主库
2.主从部署形式
- 一主一从
- 主主复制
- 一主多从---扩展系统读取的性能,因为读是在从库读取的;
- 多主一从---5.7开始支持
- 联级复制---
3.主从复制实现原理
- 主库宕机后,数据可能丢失
- 从库只有一个sql Thread,主库写压力大,复制很可能延时
- 半同步复制---解决数据丢失的问题
- 并行复制----解决从库复制延迟的问题
4.数据复制方式
数据复制方式有以下三种方式:
- 异步复制(Async):应用发起更新(含增加、删除、修改操作)请求,Master 完成相应操作后立即响应应用,Master 向 Slave 异步复制数据。因此异步复制方式下,Slave 不可用不影响主库上的操作,而 Master 不可用有较小概率会引起数据不一致。
- 强同步复制(Sync):应用发起更新(含增加、删除、修改操作)请求,Master 完成操作后向 Slave 复制数据,Slave 接收到数据后向 Master 返回成功信息,Master 接到 Slave 的反馈后再响应应用。Master 向 Slave 复制数据是同步进行的,因此 Slave 不可用会影响 Master 上的操作,而 Master 不可用不会引起数据不一致。
- 半同步复制(Semi-Sync):正常情况下数据复制方式采用强同步复制方式,当 Master 向 Slave 复制数据出现异常的时候(Slave 不可用或者双节点间的网络异常),Master 会暂停对应用的响应,直到复制方式超时退化成异步复制。如果允许应用在此时更新数据,则 Master 不可用会引起数据不一致。当双节点间的数据复制恢复正常(Slave 恢复或者网络恢复),异步复制会恢复成强同步复制。恢复成强同步复制的时间取决于半同步复制的实现方式,阿里云数据库 MySQL 5.5 版和 MySQL 5.6 版有所不同。
- 5.5集成到mysql,以插件的形式存在,需要单独安装
- 确保事务提交后binlog至少传输到一个从库
- 不保证从库应用完这个事务的binlog
- 性能有一定的降低,响应时间会更长
- 网络异常或从库宕机,卡主主库,直到超时或从库恢复
- 社区版5.6中新增
- 并行是指从库多线程apply binlog
- 库级别并行应用binlog,同一个库数据更改还是串行的(5.7版并行复制基于事务组)
set global slave_parallel_workers=10;
5.其他
5.1部分数据复制
binlog_do_db=db1 binlog_ignore_db=db1 binlog_ignore_db=db2
replicate_do_db=db1 replicate_ignore_db=db1 replicate_do_table=db1.t1 replicate_wild_do_table=db%.% replicate_wild_ignore_table=db1.%
5.2联级复制(常用)
log_slave_updates B将把A的binlog记录到自己的binlog日志中
5.3复制的监控:
show slave status \G
5.4复制出错处理
- 手动处理
- 跳过复制错误:set global sql_slave_skip_counter=1
- 主从形式
- 一主一从
- 一主多从--扩展系统读取性能
- 多主一从--5.7开始支持
- 主主复制
- 联级复制
- 用途:实时灾备的故障切换,读写分离,备份
- 原理
- 主:log dump线程传binlog;
从
i/o线程接受读取binlog,并写入relay log文件
sql线程从relay log 文件中读取binlog并持久化
- 问题及解决
- 主库宕机后,数据丢失
半同步复制
主库写压力大,因从库只有一个sql 线程来持久化,复制可能延迟
- 并行复制
- 主库宕机后,数据丢失
- 半同步复制:
- 原理
- 事务在主库写完binlog后需要从库返回一个已接受,才放回给客户端;
- 5.5集成到mysql,以插件的形式存在,需要单独安装
- 确保事务提交后binlog至少传输到一个从库
- 不保证从库应用完成这个事务的binlog
- 性能有一定的降低
- 网络异常或从库宕机,卡主库,直到超时或从库恢复
- 并行复制
- 原理:从库多线程apply binlog
- 在社区5.6中新增
- 库级别并行应用binlog,同一个库数据更改还是串行的
- 5.7版本并行复制基于事务组
- 部分数据复制
- 联级复制(常用)
- A->B->C
- B中添加参数log_slave_updates
- B将把A的binlog记录到自己的binlog日志中
- 复制的监控
- show slave status
- 复制出错处理
- 常见:1062(主键冲突),1032(记录不存在)
- 解决:
- 手动处理
- 跳过复制错误:set global sql_slave_skip_counter=1
- mysql主从复制是mysql高可用性,高性能(负载均衡)的基础
- 简单,灵活,部署方式多样,可以根据不同业务场景部署不同复制结构
- 复制过程中应该时刻监控复制状态,复制出错或延时可能给系统造成影响
- mysql主从复制目前也存在一些问题,可以根据需要部署复制增强功能
原文:https://www.cnblogs.com/Aiapple/p/5792939.html
mysql 主从复制原理【转】相关推荐
- MySQL主从复制原理、半同步操作步骤及原理
MySQL主从复制原理.半同步操作步骤及原理 1.1 企业Linux运维场景数据同步方案 1.1.1 文件级别的异机同步方案 1.scp/sftp/nc 命令可以实现远程数据同步. 2.搭建ftp/h ...
- MySQL主从复制原理应用基础
mysql主从复制 mysql支持单向 双向 链式级联 实时 异步复制,在复制过程中,一台服务器充当主服务器(Master),而一个或多个其他服务器充当从服务器(Slave) mysql主从复制的应用 ...
- mysql主从复制原理详解_简述 MySQL 逻辑架构与主从复制原理。
↑ 点击上面 "时代Java"关注我们,关注新技术,学习新知识! 1.Mysql逻辑架构图 如果能在脑海中构建出MySql各组件之间如何协同工作的架构图,就会有助于深入理解MySq ...
- MySQL主从复制原理(原理+实操)
1.MySQL主从复制原理(原理+实操) 主从复制简介 在实际的生产中,为了解决Mysql的单点故障已经提高MySQL的整体服务性能,一般都会采用「主从复制」. 比如:在复杂的业务系统中,有一句sql ...
- 五、MySQL主从复制原理
MySQL主从复制原理.半同步操作步骤及原理 标签(空格分隔): mysql 1.1 企业Linux运维场景数据同步方案 1.1.1 文件级别的异机同步方案 1.scp/sftp/nc 命令可以实现远 ...
- MySQL主从复制原理
学习MySQL主从复制,从以下几个方面进行: 1. 什么是MySQL主从复制? 2. 为什么要使用主从复制? 3. 主从复制的原理? 4. 主从复制的劣势? 5. 主从切换 6. 实际操作 一.什么是 ...
- MySQL主从复制原理解析
MySQL主从复制原理 1.为什么需要MySQL的主从复制? 2.什么是MySQL的主从复制? 3.MySQL主从复制原理 原理 具体步骤 对于MySQL主从复制,我们已经在[MySQL主从复制安装配 ...
- mysql主从复制原理详解_MySQL主从复制没使用过?三大步骤让你从原理、业务上理解透彻...
成长是一棵树,总是在你不知不觉的情况下快乐长大:成长是一株草,总是在你不知不觉的情况下长满大地:成长是一朵花,总是在你不知不觉的情况下开满山头. 这不,随着时间的迁移.项目网站的用户量.数据量持续上升 ...
- mysql主从复制原理 简书_mysql主从复制,从原理讲到安装配置,全干货
0.为什么需要主从复制? 1.在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出 ...
- mysql主从复制原理分析
1.主从复制这类NFS存储数据通过inotify+rsync同步到备份的NFS服务器,只不 过Mysql的复制方案是其自带的工具 inotify 是一种文件系统的变化通知机制,如文件增加.删除等事件可 ...
最新文章
- ad 原理图差分线_usb hub原理图及pcb设计
- 国内maven库镜像(阿里云)
- Release Type
- NET问答: String 和 string 到底有什么区别?
- 分享一个.NET平台开源免费跨平台的大数据分析框架.NET for Apache Spark
- Oracle 18c新特性:Schema-Only 帐号提升应用管理安全性
- 七号信令:信令网基本概念
- Tippy.js – 轻量的 Javascript Tooltip 工具库
- 【X86】---关于Intel芯片架构的发展史
- matplotlib绘制多子图共享鼠标光标
- 闲聊JavaScript
- 自定义UDF、UDTF函数
- 【GPS授时系列】一,写在正式开始前
- Tableau-盒须图
- 笔记本在AHCi模式下识别不到硬盘2(涵图片)
- LaTex学习(五)行内公式与行间公式的表示
- html四大作用域,JSP的三六九四(三大指令、六大标签、九大内置对象、四大作用域)...
- ArcMap 小知识(5):拓扑检查及修改
- jquery日历控件
- 百合网站的模拟IE外挂
热门文章
- Fastjson解析嵌套Map例子
- 转载如果在浏览器网页标题栏左侧加自定义小图标
- android编译make错误——javalib.jar invalid header field”、classes-full-debug.jar 错误 41 ...
- 实验server2003的域环境里安装一台Server2008 DC
- 溜达列表的鼠标HOVER变色
- Xplanner 项目规划跟踪工具
- 怎么把ui放入到java工程中_怎么把ui放入到java工程中
- OpenCV之图像二值化
- 浅析Linux下的task_struct结构体
- Snmp4j编程简介之二:PDU