mysql中的lgwr_MySQL Replication和Oracle logical standby的原理对比
MySQL
Replication和Oracle logical standby都是SQL apply,那么在实现上有何区别?
Binary Log 和 Redo的传输原理
MySQL Replication可以很方便的用来做应用的读扩展,也可以帮MySQL实现一定程度的HA方案整个复制过程实际上就是Slave从Master端抓取Binary
Log然后再在自己身上完全顺序的执行日志中所记录的各种操作
㈠ 如何同步?
主库将所有的更新操作,写入二进制日志。
从库运行"IO线程"(Slave IO Thread)读取主库的二进制日志。
从库运行"SQL线程"(Slave SQL Thread)执行IO线程(Slave
IO Thread)读取的日志中的SQL,从而保持和主库的事务一致
㈡ 如何分配请求?
目前,这部分需要在应用层实现。
执行更新SQL(UPDATE,INSERT,DELETE)时,请求主库
执行查询SQL(SELECT)时,请求从库
所以,当你的应用(Application)SELECT请求所占的比率越大,那么Relication就会越有效
㈢ MySQL如何传输二进制日志,是主库推,还是备库拉?MySQL日志传输的实时性如何?
在MySQL Replication结构中,备库端初次通过CHANGE
MASTER TO完成Replication配置,再使用start slave命令开始复制
更细致的:
① Slave上的IO Thread连接上Master,并向Master发起读取Binary
Log的请求(COM_BINLOG_DUMP命令),从指定日志文件的指定位置(或者最开始的日志)之后的日志内容
② Master收到COM_BINLOG_DUMP请求后,使用dump
thread不断向Slave IO Thread发送Binary Log(指定日志文件的指定位置之后的日志信息)返回信息中除了日志所包含的信息之外,还包括本次返回的信息在Master的Binary
Log的文件名称以及在Binary Log中的位置
③ 在Master一旦有新的日志产生后,立刻会发送一次广播,dump thread在收到广播后,则会读取二进制日志并通过网络向Slave传输日志
④ Slave的IO thread接收到信息后,将接收到的日志内容依次写入到Slave的Relay
Log文件(mysql-relay-bin.xxxxxx)的最末端。并将读取到的Master的Binary
Log的文件名和位置记录到master-info文件中,以便在下次读取的时候能够清楚地告诉Master:
“俺们需要从某个Binary Log的哪个位置开始往后的日志内容,请发给我”
⑤ Slave的SQL thread检测到Relay Log中新增加了内容后,会马上解析Log文件中的内容成为在Master真实执行时候的那些可执行的Query语句,并在自身执行这些Query。这样,实际上就是在Master和Slave执行了同样的Query,所以两端的数据完全一样。
所以这是一个主库向备库不断推送的过程
新日志在产生后,只需一次广播和网络就会立刻(<1ms)向发送到备库,如果主备之间网络较好的话(例如RTT<1ms),备库端的日志也就小于2ms了
所以,一般的(依赖于RTT),备库的实时性都非常好。
注释:
RTT(Round-Trip Time): 往返时延,在计算机网络中它也是一个重要的性能指标,它表示从发送端发送数据开始,到发送端收到来自接收端的确认(接收端收到数据后便立即发送确认),总共经历的时延对于Oracle,在primary,DataGuard可以使用归档进程(ARCn)或者日志写进程(LGWR)收集redo数据并传输到standby
㈠ 使用ARCn归档redo数据
缺省情况下,RTS使用ARCn进程归档redo日志。不过ARCn归档进程只支持最高性能的保护模式primary日志发生切换时就会启动归档:
在primary(假设有2个归档进程),一旦ARC0进程完成redolog的归档,ARC1进程即开始传输该归档到standby的指定路径
在standby,RFS进程轮流将redo数据写入standby log,再由standby中的ARCn进程将其写入归档,然后通过SQL
apply将数据应用到standby数据库
㈡ 使用LGWR归档实时同步redo数据
使用LGWR进程与使用ARCn进程有明显不同,LGWR无须等待日志切换及完成归档
在primary,LGWR提交redo数据到LNSn(LGWR Network Server
process)进程(n>0),LNSn启动网络传输
在standby的RFS(Remote File Server)将接收到的redo数据写入standby
log。在此期间,primary的事务会一直保持,直到所有含LGWR SYNC属性的LOG_ARCHIVE_DEST_n指定路径均已完成接收
㈢ 使用LGWR归档异步redo数据
大致步骤与同步传输相同,差别只在LNSn进程这里,LGWR写数据到online
redolog
LNSn进程访问online redolog并传输数据到远程standby的RFS而不再与本地LGWR之间有联系standby数据库方面的处理逻辑仍然不变
复制实现级别和数据保护模式
MySQL Replication可以是基于statement level,也可以基于row
level不同的复制级别会影响到Master的Binary Log记录成不同的形式
① row level
Binary Log会记录成每一行数据被修改的形式,然后再Slave再对相同数据进行修改
优点:
⒈ Row Level的日志内容会非常清楚的记录下每一行数据修改的细节,非常容易理解
⒉ 不存在某些情况下存储过程或function以及trigger的调用和触发无法被正确复制的问题
缺点:
产生惊人的日志量
② statement level
每一条会修改数据的Query都会记录到Master的Binary Log中。Slave
在复制的时候SQL线程会解析成和原来Master端执行过的相同的Query来再次执行
优点:
减少Binary Log日志量,节约了IO成本,提高了性能
缺点:
⒈ 必须级联记录每条语句在执行时的上下文信息
⒉ 存在某些情况下存储过程或function以及trigger的调用和触发无法被正确复制的问题
Data Guard提供了三种数据保护的模式
① 最大保护(Maximum protection):
所有的事务在提交前至少一个standby数据库redo数据被同步写入
如果出现了什么故障导致standby数据库不可用的话,primary数据库会被shutdown
② 最高性能(Maximum performance):
事务可以随时提交,当前primary数据库的redo数据也需要至少写入一个standby数据库,不过这种写入可以是不同步的
③ 最高可用性(Maximum availability):
和maximum protection一样,至少一个standby数据库redo数据被同步写入不过与之不同的是,如果出现故障导入无法同时写入standby数据库redo
log,primary数据库并不会shutdown而是自动转为最高性能模式,等standby数据库恢复正常之后,它又会再自动转换成最高可用性模式
mysql中的lgwr_MySQL Replication和Oracle logical standby的原理对比相关推荐
- oracle logical standby,Oracle Dataguard管理命令(logical standby)
Oracle Dataguard管理命令(logical standby) ################# ## 管理命令: ################# 1.注册日志的命令standby ...
- mysql rac_MySQL Galera集群和ORACLE RAC的实现原理比较
MySQL Galera集群和ORACLE RAC的实现原理比较 MySQL Galera(以下简称MG)是通shared nothing结构,整个cluster中每个节点都有一个单独的数据拷贝.而 ...
- oracle logical standby,创建Oracle 11g logical standby
其实过程很简单....做过10g创建logical standby的同志看都不用看了,除了新增加一个ALTER DATABASE RECOVER TO LOGICAL STANDBY KEEP IDE ...
- mysql中输出100内质数,oracle中用while循环查询1到100的质数(素数)
declare i number:=1; --表示当前数字 j number:=0; --从2开始,存储判断的数字 sum1 number:=0;--总数 begin while(i<100 ...
- oracle logical standby,Oracle10gR2 Logical Standby(一)概念与原理
从Oracle9i开始支持逻辑Standby,通过logminer从日志中挖掘出sql语句重新在备库应用,来达到主备库数据冗余的目的.由于逻辑备库在应用sql的同时是处于open状态了,那么除了可以利 ...
- MySQL中的主键、唯一键、外键对比
一.主键 主键:每张表中只能有一个字段(复合主键可以有多个字段)使用此属性,用来唯一约束该字段中的数据,不能重复 1.增加主键: 在创建表的时候,直接在字段后,添加primary key关键字 CRE ...
- mysql 伪表查询语句_MySql系列05:MySql中DQL查询操作
1.表的准备 准备四张表: dept(部门表).emp(员工表).salgrade(薪资等级表).bonus(奖金表) create table DEPT( DEPTNO int(2) not nul ...
- mysql ifnull 无效_关于MySql中使用IFNULL()函数失效的问题。
今天在学习时,碰到一个问题:在联表查询取得结果后,如果取得的结果是空值,则给一个默认值,如果不是空值,则返回这个值. 下面我们来看看业务场景: 在menu表中: 存储的是前端页面的菜单配置,注意成员权 ...
- MySQL中的IFNULL函数和IF函数
MySQL中的IFNULL函数类似于Oracle中的NVL函数,其表达式为:IFNULL(expr1,expr2),含义是:如果第一个参数不为空,则返回第一个参数,否则返回第二个参数. IF(expr ...
最新文章
- python3.x下 smtp发送html邮件和附件
- centos7下ip转发的配置
- HTTP协议(HyperText Transfer Protocol,超文本传输协议)
- Discuz!NT 中的数据库链接类(重构到抽象类工厂模式)
- 使用librdkafka的C++接口实现简单的生产者和消费者
- 使用debug工具修改寄存器中的值
- PHP mail()可能导致的问题
- 疯子的算法总结(六) 简单排序总 选择排序+插入排序+比较排序+冒泡排序
- 使用Spring Boot和MongoDB创建REST API
- lfsr算法c语言,求助:如何用C语言实现LFSR加密
- 学霸女神冯净冰:我是如何从复旦走到诺奖获得者经济学大会的
- uni-app中image组件的基本使用
- 基于asp.net806莆田新华网上书店_图书销售系统
- c++一本通在线测评网站 1161:转进制
- 基于端口号的虚拟主机
- 个推解读 | 各厂商推送消息分类新规出台,APP开发者必看
- Linux平台被勒索软件REvil盯上
- IT行业人才招聘回顾与展望
- mysql 8.0设置密码 (doc命令)
- linux清理日志 hack,Linux系统的LOG日志文件及入侵后日志的清除
热门文章
- 【Python3网络爬虫开发实战】1.5.3-redis-py的安装
- mysql数据库版本不同_MySQL不同版本数据同步
- 【python基础】ValueError: only 2 non-keyword arguments accepte
- Windows将WSL 1升级为WSL2
- 使用python写程序时遇到的几个小问题
- 例子---年倒计时/JS日期对象类型
- day16 java的访问控制权限
- vue router 跳转php,vue路由:路由跳转后怎么知道切换到那个router-view中
- advice 和 拦截器_ControllerAdvice拦截器
- html li去掉黑点_10分钟教你Python爬虫(上) HTML和爬虫基础