mysql id自动递增两个_MySQL双主一致性架构优化
转自:
MySQL双主一致性架构优化 - osc_avwazwuz的个人空间 - OSCHINAmy.oschina.net
一、双主保证高可用
MySQL数据库集群常使用一主多从,主从同步,读写分离的方式来扩充数据库的读性能,保证读库的高可用,但此时写库仍然是单点。
在一个MySQL数据库集群中可以设置两个主库,并设置双向同步,以冗余写库的方式来保证写库的高可用。二、并发引发不一致
数据冗余会引发数据的一致性问题,因为数据的同步有一个时间差,并发的写入可能导致数据同步失败,引起数据丢失:
MySQL双主一致性架构优化 - osc_avwazwuz的个人空间 - OSCHINA一、双主保证高可用
MySQL数据库集群常使用一主多从,主从同步,读写分离的方式来扩充数据库的读性能,保证读库的高可用,但此时写库仍然是单点。
在一个MySQL数据库集群中可以设置两个主库,并设置双向同步,以冗余写库的方式来保证写库的高可用。二、并发引发不一致
数据冗余会引发数据的一致性问题,因为数据的同步有一个时间差,并发的写入可能导致数据同步失败,引起数据丢失:
如上图所述,假设主库使用了auto increment来作为自增主键:
- 两个MySQL-master设置双向同步可以用来保证主库的高可用
- 数据库中现存的记录主键是1,2,3
- 主库1插入了一条记录,主键为4,并向主库2同步数据
- 数据同步成功之前,主库2也插入了一条记录,由于数据还没有同步成功,插入记录生成的主键也为4,并向主库1也同步数据
- 主库1和主库2都插入了主键为4的记录,双主同步失败,数据不一致
三、相同步长免冲突能否保证两个主库生成的主键一定不冲突呢?回答:
- 设置不同的初始值
- 设置相同的增长步长
就能够做到。
如上图所示:
- 两个MySQL-master设置双向同步可以用来保证主库的高可用
- 库1的自增初始值是1,库2的自增初始值是2,增长步长都为2
- 库1中插入数据主键为1/3/5/7,库2中插入数据主键为2/4/6/8,不冲突
- 数据双向同步后,两个主库会包含全部数据
如上图所示,两个主库最终都将包含1/2/3/4/5/6/7/8所有数据,即使有一个主库挂了,另一个主库也能够保证写库的高可用。四、上游生成ID避冲突换一个思路,为何要依赖于数据库的自增ID,来保证数据的一致性呢?
完全可以由业务上游,使用统一的ID生成器,来保证ID的生成不冲突:
如上图所示,调用方插入数据时,带入全局唯一ID,而不依赖于数据库的auto increment,也能解决这个问题。
至于如何生成全局唯一,趋势递增的ID,参见文章《分布式ID生成算法》。五、消除双写不治本
使用auto increment两个主库并发写可能导致数据不一致,只使用一个主库提供服务,另一个主库作为shadow-master,只用来保证高可用,能否避免一致性问题呢?
如上图所示:
- 两个MySQL-master设置双向同步可以用来保证主库的高可用
- 只有主库1对外提供写入服务
- 两个主库设置相同的虚IP,在主库1挂掉或者网络异常的时候,虚IP自动漂移,shadow master顶上,保证主库的高可用
这个切换由于虚IP没有变化,所以切换过程对调用方是透明的,但在极限的情况下,也可能引发数据的不一致:
如上图所示:
- 两个MySQL-master设置双向同步可以用来保证主库的高可用,并设置了相同的虚IP
- 网络抖动前,主库1对上游提供写入服务,插入了一条记录,主键为4,并向shadow master主库2同步数据
- 突然主库1网络异常,keepalived检测出异常后,实施虚IP漂移,主库2开始提供服务
- 在主键4的数据同步成功之前,主库2插入了一条记录,也生成了主键为4的记录,结果导致数据不一致
六、内网DNS探测
虚IP漂移,双主同步延时导致的数据不一致,本质上,需要在双主同步完数据之后,再实施虚IP偏移,使用内网DNS探测,可以实现shadow master延时高可用:
- 使用内网域名连接数据库,例如:http://db.58daojia.org
- 主库1和主库2设置双主同步,不使用相同虚IP,而是分别使用ip1和ip2
- 一开始http://db.58daojia.org指向ip1
- 用一个小脚本轮询探测ip1主库的连通性
- 当ip1主库发生异常时,小脚本delay一个x秒的延时,等待主库2同步完数据之后,再将http://db.58daojia.org解析到ip2
- 程序以内网域名进行重连,即可自动连接到ip2主库,并保证了数据的一致性
七、总结
主库高可用,主库一致性,一些小技巧:
- 双主同步是一种常见的保证写库高可用的方式
- 设置相同步长,不同初始值,可以避免auto increment生成冲突主键
- 不依赖数据库,业务调用方自己生成全局唯一ID是一个好方法
- shadow master保证写库高可用,只有一个写库提供服务,并不能完全保证一致性
- 内网DNS探测,可以实现在主库1出现问题后,延时一个时间,再进行主库切换,以保证数据一致性
mysql id自动递增两个_MySQL双主一致性架构优化相关推荐
- mysql 双从性能_MySQL双主一致性架构优化
转自:MySQL双主一致性架构优化 - osc_avwazwuz的个人空间 - OSCHINAmy.oschina.net 一.双主保证高可用 MySQL数据库集群常使用一主多从,主从同步,读写分离 ...
- mysql双主数据一致性_MySQL双主一致性架构优化 | 架构师之路-阿里云开发者社区...
一.双主保证高可用 MySQL数据库集群常使用一主多从,主从同步,读写分离的方式来扩充数据库的读性能,保证读库的高可用,但此时写库仍然是单点. 在一个MySQL数据库集群中可以设置两个主库,并设置双向 ...
- sql优化之:数据库索引创建原则,or/in/union与索引优化,聚集索引/非聚集索引/联合索引/索引覆盖,MySQL冗余数据的三种方案,MySQL双主一致性架构优化(来源:架构师之路)
一.一些常见的SQL实践 (1)负向条件查询不能使用索引 select * from order where status!=0 and stauts!=1 not in/not exists都不是好 ...
- 【转】MySQL双主一致性架构优化
[原文]https://www.toutiao.com/i6594414914838725133/ 一.双主保证高可用 MySQL数据库集群常使用一主多从,主从同步,读写分离的方式来扩充数据库的读性能 ...
- MySQL双主一致性架构优化
2019独角兽企业重金招聘Python工程师标准>>> 一.双主保证高可用 MySQL数据库集群常使用一主多从,主从同步,读写分离的方式来扩充数据库的读性能,保证读库的高可用,但此时 ...
- mysql id自动递增两个_浅析Mysql索引数据结构演变,让你一看就懂
前言 相信小伙伴应该都用到过mysql数据库,在mysql数据库中,为了提升查询效率,都会使用到索引技术.今天老顾就来介绍一下mysql索引的数据结构的演变. 数据查询 我们来看一下有个用户表,存放这 ...
- mysql+keepalived必须要lvs吗_MySQL 双主热备 + LVS + Keepalived 高可用操作记录
MySQL复制能够保证数据的冗余的同时可以做读写分离来分担系统压力,如果是主主复制还可以很好的避免主节点的单点故障.然而MySQL主主复制存在一些问题无法满足我们的实际需要:未提供统一访问入口来实现负 ...
- mysql 5.6 双向互备_mysql双主互备
5.则配置同步信息. change master to master_host='192.168.1.102',master_port=3306,master_user='replication',m ...
- mysql+keepalived必须要lvs吗_Mysql双主热备+LVS+Keepalived高可用操作记录
MySQL复制能够保证数据的冗余的同时可以做读写分离来分担系统压力,如果是主主复制还可以很好的避免主节点的单点故障.然而MySQL主主复制存在一些问题无法满足我们的实际需要:未提供统一访问入口来实现负 ...
最新文章
- java Windows7 下环境变量设置
- openresty获取nginx原始的请求头内容
- mysql 8.0 创建函数_MySQL 8.0 新增特性
- [翻译]延迟着色(1)
- PL/SQL 编程(二)
- java从url下载文件_Java从URL下载文件
- 华尔街顶级大师胡立阳名言
- 特斯拉车顶维权女车主称被恐吓 将公布特斯拉提供的不完整数据
- Q102:光线追踪场景(5)——驭龙台
- netty使用(5)client_server一发一回阐释ByteBuffer的使用
- 各种模糊控制算法案例word+程序+建模过程
- 一文掌握有序logistic回归分析
- h5 前端 PHP,十分钟搞定微信H5支付(ThinkPHP5.1)
- 超简单的HIDPI设置
- python中的pip什么意思-python中的pip
- 当新建css样式时默认名,网页制作考题2
- 操作系统存储管理之虚拟存储与分页式虚拟存储系统
- 【Android 常见控件使用】ListView_BaseAdapter 自定义Adapter简单使用
- mac ruby 环境变量_Ruby环境设置| 在Mac和Windows操作系统上安装Ruby
- Qt与Mysql进行连接实现账号的注册登录和密码修改和验证码
热门文章
- 两个网段共享打印机_Win7电脑之间实现跨网段共享打印机的方法
- 计算机辅助设计高级绘图员技能鉴定试题,计算机辅助设计高级绘图员技能鉴定试题...
- Java获取桌面(desktop)文件夹
- Hyperledger Fabric 官网翻译入门教程--之关键概念(Hyperledger Fabric 模型)
- 鸟哥的私房菜笔记—文件权限与目录配置
- 【OpenFiler】使用虚拟机安装openfiler
- 网站服务器不要开启BBR,在缓存服务器上开启bbr测试
- matlab仿真无线充电,一种联合MATLAB和HFSS软件的无线充电仿真方法与流程
- Docker容器内Ubuntu更新源失败/卡住的解决方法
- 看懂 Serverless SSR,这一篇就够了!