数据库主从延迟导致查询不准确的解决思路

2024-06-08 08:20:31

强烈推荐一个大神的人工智能的教程：http://www.captainbed.net/zhanghan

【前言】

当数据达到一定量的时候，数据库会成为整个系统的瓶颈，一般采取的优化策略为读写分离，数据库通过分主库从库从而实现读写分离（写请求操作主库，读请求操作从库）；

【解决数据延迟思路】

一、主从同步原理（在此以目前最普及的MySQL为例）

以下是一张经典的MySQL通过binlog实现主从数据同步的原理图：

二、问题是如何产生？

1、从上面原理图中不难发现，主从同步是有一定的延迟，影响延迟大小因素：

（1）延迟的大小取决于从上次同步到现在产生数据量

（2）当前服务器间网络情况

（3）主从服务器本身压力（CPU，内存，IO等）

2、由于数据库服务一般都是在内网当中，而且服务器在购置时都会高一些配置（比实际需要）所以基本上同步都很快，一般为毫秒级；

3、一般的业务场景中毫秒级延迟是可以忽略；

4、有一般就有特殊，有一些特殊情况需要实时毫秒级的时间差也不允许；以下是针对这些特殊情况给出常见的解决方案。

三、数据延迟解决方案：

1、方案一：写程序双写（写主库同时写读库）

2、方案二：读程序查主库

3、方案三：写程序写主库且写缓存（设置一定的失效时间，一般略大于数据库同步最大时延即可），读程序读缓存读从库

四、三种方案优缺点：

1、方案一：双写会消耗一定的性能，实现起来比较简单，高并发写的场景不适用；

2、方案二：读程序会影响主库的性能，实现起来比较简单，高并发读的场景不适用；

3、方案三：大部分情况下读写均多消耗写性能，实现较为复杂，高并发读写都适用（缓存读写非常快）；

【总结】

1、实现固然重要，但更为重要的是思路；

2、很多底层的原理与思想是通用的。

数据库主从延迟导致查询不准确的解决思路相关推荐

oracle强制拉库跳过recovery,学习笔记:Oracle坏块数据库recover恢复时遇到坏块的解决思路案例...
天萃荷净 recover遇到坏块处理本质探讨,记录一次在Oracle数据库recover恢复过程中,遇到数据库坏块无法恢复的解决思路案例如果在还原出来的数据文件中有坏块,而归档日志和联机日志是正常的 ...
针对MySQL数据库主从延迟的问题
因从库是单进程,采用队列形式应用主库推送过来的binlog日志,当主库写压力较大时,从库就会跟不上,从而产生延迟. 调整业务: 1.一些公司的数据库设计,把各种业务的库都放到一个数据库实例里,比如一条 ...
如何在生产环境mysql删除亿万级数据解并且不影响数据库主从延迟的解决方案
目录前言为什么在生产上主从环境情况下mySQL特别容易卡死不要去怪设计不要去怪开发我们devops靠自己场景一.当要被删除的数据量远大于保留的数据量的场景下的做法操作涉及数据量及环境烂机器 ...
win7与internet时间同步出错_win7系统无法同步Internet时间导致时间不准确的解决方法...
在Win7系统中为了获得更好的时间准确定会同步系统时间.但是在同步Internet时间的过程中会遇到一些错误问题,比如一些朋友发现自己的win7旗舰版系统电脑能正常上网,而时间却无法同步(同步时出错) ...
oracle数据库内存不足导致查询变慢,经验：探索内存问题如何造成数据库性能严重异常...
导读:在使用数据库的过程中,内存不足常常会引起数据库异常.但是内存不足,又会为数据库带来哪些具体的影响呢?本次,我们将通过某客户现场数据库在某个时段内性能严重下降的案例来展示由于主机内存不足而造成数据 ...
redis面试：由于主从延迟导致读取到过期数据怎么处理
读写分离,当使用从节点响应读请求时,业务端可能会遇到如下问题: 复制数据延迟读到过期数据从节点故障复制数据延迟因为主从库间的命令复制是异步进行的,所以有可能客户端从从客户读取到的主和主库中最新 ...
mysql 临时文件写满_阿里云数据库MySQL临时文件导致实例空间满的解决办法
MySQL实例可能会由于查询语句的排序.分组.关联表产生的临时表文件,或者大事务未提交前产生的binlog cache文件,导致实例空间满,为避免数据丢失,RDS会对实例进行自动锁定,磁盘锁定之后,将 ...
STM32写FLASH期间导致中断无法响应的解决思路
思路一:将中断程序或者整个程序放到RAM执行详情参考:解决STM32F0/F1内部FLASH写操作导致中断程序无法响应的问题思路二:让我们回顾下初衷,我们要往FLASH保存数据? 显而易见,往FL ...
oracle 39083错误,Oracle数据库导入导出时，ORA-39083;ORA-00439错误解决思路
ORA-39083: Object type TABLE:"TEST"."TEST_SS_NAME" failed to create with error: ...

最新文章

热门文章