mysql 重构同步老数据_MySQL 重构查询的方式

主题：如何重构查询冰战士何时需要使用这种技巧

(1)一种复杂查询还是多个简单查询

设计查询的时候需要考虑的一个重要问题是是否需要将一个复杂的查询分成多个简单的查询。在平时我们总是强调需要数据库完成尽可能多的工作，这样做的逻辑在于以前总是认为通络通信，查询解析以及优化师一种代价很高的事情。但是MySQL在设计上让连接和断开连接都很轻量级，在返回一个小的查询结果方面很高效。线代的网络速度比以前要快很多，无论是带宽还是延迟。

MySQL内部内部每秒能够扫描内存中上百万行的数据，相比之下MySQL响应数据给客户端就要慢很多了。在其他条件相同的时候，使用尽可能少的查询当然是更好的。但是，将一个大查询分解成小查询是很有必要的。不过再应用设计的时候，如果一个查询能够胜任时还写成多个小查询那就是傻逼

(2)切分查询

有时候对于一个大查询我们就要将大查询切分成小查询，每个查询功能完全一样，但是只完成一小部分，每次返回一小部分查询结果。

删除旧数据就是一个很好的例子。定期的清除大量数据时，如果用一个大语句一次性完成的话，则可能需要一次锁住很多的数据，占满整个事务日志、耗尽系统资源、阻塞很多小的但重要的查询。将一个大的DELETE语句切分成多个较小的查询尽可能小的影响MySQL性能，同时还减少MySQL复制到延迟。同时，需要注意的是，如果每次删除数据后，都暂停一会儿再做下一次杀出，这样也可以将服务器上原本一次性的压力分散到一个很长的时间段中，就可以大大的降低对服务器的影响，还可以大大减少删除时锁的持有时间

(3)分解关联查询

简单的关联查询分解就是可以对每个表进行一次单表查询，然后将结果在应用程序中进行关联。例如：

select * fromtag

join tag_post ON tag_post.tag_id=tag.id

join post ON tag_post_id=post.idwhere tag.tag='mysql'

可以分解成

select * from tag where tag='mysql'

select * from tag_post where tag_id=1234

select * from post where post.id in (123,456,567,9098,8904)

乍一看，这样做并没有什么好处，原本一条查询，这里却变成多条查询，返回的结果又是一模一样。事实上，用分解关联查询重构查询有如下的优点：

①让缓存的效率更高。②将查询费恩节后，执行单个查询可以减少锁竞争。③在应用层做关联，可以更容易对数据库进行拆分，更容易做到高性能和可拓展。④查询本身效率也可能有所提升。⑤可以减少冗余记录的查询。⑥更进一步，这样做相当于在应用中实现了哈希关联，而不是使用MySQL的嵌套循环关联

在很多情况下，通过重构查询将关联放到应用程序中将会更加高效，这样的场景有很多。比如：当应用能够方便的缓存单个查询的结果的时候、当可以将数据分布到不同的MySQL服务器上的时候、当能够使用IN代替关联查询的时候。

mysql 重构同步老数据_MySQL 重构查询的方式相关推荐

如何查mysql里有多少条数据_mysql快速查询数据库中有多少条数据
慕尼黑的夜晚无繁华 mysql 统计表的数量:SELECT COUNT(1) FROM information_schema.TABLES WHERE TABLE_SCHEMA = '你的数据库'; ...
mysql主从同步部分表_Mysql入门MySQL 主从同步部分数据表
<Mysql入门MySQL 主从同步部分数据表>要点: 本文介绍了Mysql入门MySQL 主从同步部分数据表,希望对您有用.如果有疑问,可以联系我们. 导读:在配置MySQL主从同步的时 ...
mysql如何更新两条数据_mysql根据查询结果批量更新多条数据（插入或更新）
mysql根据查询结果批量更新多条数据(插入或更新) 1.1 前言 mysql根据查询结果执行批量更新或插入时经常会遇到1093的错误问题.基本上批量插入或新增都会涉及到子查询,mysql是建议不要对 ...
mysql主从同步当天数据,mysql主从数据同步
一,安装好主数据库和从数据库,此处省略我已经准备好了以下数据库主: centos 7 mysql 5.7 ip 192.168.1.2 从: centos 7 mysql 5.7 ip 192.1 ...
mysql定时清空表数据_Mysql实现定时清空一张表的旧数据并保留几条数据
要达到如下目的: Mysql数据库会每隔一段时间(可以是2小时,也可以是一天,这个可以自定义),定时对一张库中的表做一个判断,如果这张表的数据超过了20条(这个数据也是自定义的,也可以是200条),就 ...
mysql修改级联表数据_MySQL数据库外键,级联, 修改表的操作
1.外键: 用来建立两张表之间的关系 - 一对多 - 多对多 - 一对一研究表与表之间的关系: 1.定义一张员工部门表 id, name, gender, dep_name, dep_desc - ...
php mysql数据库同步_实现MySQL数据库同步实例演示_MySQL
本次实验的主要目的是剖析配置MySQL(和PHP搭配之最佳组合) 数据库的主辅MySQL数据库同步的实际操作步骤,我前两天在相关网站看见的资料,觉得挺好,就拿出来供大家分享,开始具体的配置. 本次试验 ...
mysql删除表单挑数据_MySQL 删除数据表
MySQL 删除数据表 MySQL中删除数据表是非常容易操作的, 但是你再进行删除表操作时要非常小心,因为执行删除命令后所有数据都会消失. 语法以下为删除MySQL数据表的通用语法: DROP TA ...
php mysql 插入多条数据_mysql如何插入多条数据？
mysql插入多条数据的方法:1.使用"INSERT INTO 表名字段列表 VALUES (值1) - , (值n);"语句插入数据:2.使用"INSERT INTO ...

mysql 重构同步老数据_MySQL 重构查询的方式

mysql 重构同步老数据_MySQL 重构查询的方式相关推荐

最新文章

热门文章