MySQL中IN子查询会导致无法使用索引
今天看到一个博客园的一篇关于MySQL的IN子查询优化的案例,
一开始感觉有点半信半疑(如果是换做在SQL Server中,这种情况是绝对不可能的,后面会做一个简单的测试。)
随后动手按照他说的做了一个表来测试验证,发现MySQL的IN子查询做的不好,确实会导致无法使用索引的情况(IN子查询无法使用所以,场景是MySQL,截止的版本是5.7.18)
MySQL的测试环境
测试表如下
create table test_table2 (id int auto_increment primary key,pay_id int,pay_time datetime,other_col varchar(100) )
建一个存储过程插入测试数据,测试数据的特点是pay_id可重复,这里在存储过程处理成,循环插入300W条数据的过程中,每隔100条数据插入一条重复的pay_id,时间字段在一定范围内随机
CREATE DEFINER=`root`@`%` PROCEDURE `test_insert`(IN `loopcount` INT)LANGUAGE SQLNOT DETERMINISTICCONTAINS SQLSQL SECURITY DEFINERCOMMENT '' BEGINdeclare cnt int;set cnt = 0;while cnt< loopcount doinsert into test_table2 (pay_id,pay_time,other_col) values (cnt,date_add(now(), interval floor(300*rand()) day),uuid());if (cnt mod 100 = 0) theninsert into test_table2 (pay_id,pay_time,other_col) values (cnt,date_add(now(), interval floor(300*rand()) day),uuid());end if;set cnt = cnt + 1; end while; END
执行 call test_insert(3000000); 插入303000行数据
两种子查询的写法
查询大概的意思是查询某个时间段之内的业务Id大于1的数据,于是就出现两种写法。
第一种写法如下:IN子查询中是某段时间内业务统计行数大于1的业务Id,外层按照IN子查询的结果进行查询,业务Id的列pay_id上有索引,逻辑也比较简单,
这种写法,在数据量大的时候确实效率比较低,用不到索引
select * from test_table2 force index(idx_pay_id) where pay_id in ( select pay_id from test_table2 where pay_time>="2016-06-01 00:00:00" AND pay_time<="2017-07-03 12:59:59" group by pay_id having count(pay_id) > 1 );
执行结果:2.23秒
第二种写法,与子查询进行join关联,这种写法相当于上面的IN子查询写法,下面测试发现,效率确实有不少的提高
select tpp1.* from test_table2 tpp1, (select pay_id from test_table2 WHERE pay_time>="2016-07-01 00:00:00" AND pay_time<="2017-07-03 12:59:59" group by pay_id having count(pay_id) > 1 ) tpp2 where tpp1.pay_id=tpp2.pay_id
执行结果:0.48秒
In子查询的执行计划,发现外层查询是一个全表扫描的方式,没有用到pay_id上的索引
join自查的执行计划,外层(tpp1别名的查询)是用到pay_id上的索引的。
后面想对第一种查询方式使用强制索引,虽然是不报错的,但是发现根本没用
如果子查询是直接的值,则是可以正常使用索引的。
可见MySQL对IN子查询的支持,做的确实不怎么样。
另外:加一个使用临时表的情况,虽然比不少join方式查询的,但是也比直接使用IN子查询效率要高,这种情况下,也是可以使用到索引的,不过这种简单的情况,是没有必要使用临时表的。
下面是类似案例在sqlserver 2014中的测试,几乎完全一样的测试表结构和数量,可见这种情况下,两种写法,在SQL Server中可以认为是完全一样的(执行计划+效率),这一点SQL Server要比MySQL强不少
下面是sqlserver中的测试环境脚本。
create table test_table2 (id int identity(1,1) primary key,pay_id int,pay_time datetime,other_col varchar(100) )begin tran declare @i int = 0 while @i<300000 begininsert into test_table2 values (@i,getdate()-rand()*300,newid());if(@i%1000=0)begininsert into test_table2 values (@i,getdate()-rand()*300,newid());endset @i = @i + 1 end COMMIT GOcreate index idx_pay_id on test_table2(pay_id); create index idx_time on test_table2(pay_time); GOselect * from test_table2 where pay_id in (select pay_id from test_table2 where pay_time>='2017-01-21 00:00:00' AND pay_time<='2017-07-03 12:59:59' group by pay_id having count(pay_id) > 1);select tpp1.* from test_table2 tpp1, (select pay_id from test_table2 WHERE pay_time>='2017-01-21 00:00:00'AND pay_time<='2017-07-30 12:59:59' group by pay_id having count(pay_id) > 1 ) tpp2 where tpp1.pay_id=tpp2.pay_id
总结:在MySQL数据中,截止5.7.18版本,对IN子查询,仍要慎用
MySQL中IN子查询会导致无法使用索引相关推荐
- mysql子查询为什么不走索引_解决MySQL中IN子查询会导致无法使用索引问题
测试表如下: CREATE TABLE`test_table` ( `id`int(11) NOT NULLAUTO_INCREMENT, `pay_id`int(11) DEFAULT NULL, ...
- mysql子查询走索引吗_MySQL中in子查询会导致无法使用索引问题(转)
MySQL的测试环境 测试表如下 create tabletest_table2 ( idint auto_increment primary key, pay_idint, pay_timedate ...
- any在mysql语句中用法,MySQL中,子查询中可以使用运算符ANY,它表示的意思是______。...
MySQL中,子查询中可以使用运算符ANY,它表示的意思是______. 答:至少一个值满足条件 According to your textbook, the main purpose of a s ...
- MySQL中嵌套子查询删除出错解决方案
MySQL中嵌套子查询做删除操作会出错,例如下面的SQL: delete from table1 where number in (select number from table2) 执行提示: Y ...
- 详细讲述MySQL中的子查询操作
基本含义 就是在一个查询语句(select语句)中的内部,某些位置,又出现的"查询语句". 例: 这里写图片描述 修改后: 这里写图片描述 如果将该"select 500 ...
- jq取第一个子元素为select_Java修行第036天---MySQL中的子查询,分页语句,三大范式...
学习目标: 1.掌握子查询 2.了解正则表达式 3.理解索引的作用和创建索引 4.了解用户管理 5.掌握分页语句 6.了解执行计划和数据库引擎 7.理解数据库设计的三大范式 综合程序图: 1 子查询知 ...
- MySQL中的子查询
子查询 子查询:查询操作是在某个查询结果上进行的,一条select语句内部包含了另外一条select语句. 分类:按结果和位置进行分类. 按结果分类:根据子查询得到的数据进行分类,具体可以分成以下几类 ...
- MySQL中的子查询(第八章)
1 子查询的介绍 -- 查找图书价格 SELECT price FROM bookinfo WHERE book_id = 20150301; -- 更新读者信息的余额 UPDATE readerin ...
- mysql中update子查询,update 子查询使用介绍
基础知识 1, 关联子查询和非关联子查询 在非关联子查询中,内部查询只执行一次并返回它的值给外部查询,然后外部查询在它的处理中使用内部查询返回给它的值.而在关联子查询中,对于外部查询返回的每一行数据, ...
- mysql分组失效_请教MySql中使用表子查询时,试着先排序后分组,出现排序失效的原因?...
1,今天试着码了一下教程里的题目,是找出每一个班级的身高最高的学生,用的是先order by降序排序所有学生升高,再用 group by分组每一个班级取第一个值,却发现当使用子查询时,得到的仍旧是未排 ...
最新文章
- matlab 图论工具箱
- 各种NLP操作难实现?谷歌开源序列建模框架Lingvo
- maven 亲测可用国内镜像 阿里云
- Web前端技术分享:Javascript中的内置对象数组讲解
- 对外经贸大学计算机应用基础,对外经贸大学计算机应用基础试题.doc
- 搭建私有helm仓库及图形界面
- springboot如何使用log4j记录日志
- 平稳序列的预测和拟合之模型优化
- C. 啊对对对 (南阳理工oj—21第二次招新赛)
- 【Flink】Rowtime timestamp is null. Please make sure that a proper TimestampAssigner is defined and th
- 图像分类——EfficientNet的学习笔记
- 2017级计科新生游戏大作业制作讲解
- Redis 常见的性能问题和解决方法
- 基于机器视觉的细小金属件表面污渍检测
- python调用可执行文件_如何从Python脚本调用可执行文件?
- [转]C#综合揭秘——细说进程、应用程序域与上下文之间的关系
- 基于JAVA SSM框架的酒店客房管理系统设计
- Latex学习笔记 (5) 通用长度单位
- 阿兹卡班(azikaban)报错:syntax error:unexpected end of file
- 《UEFI内核导读》全集,2023年更新
热门文章
- BaseAdapter的逗逼、普通、文艺写法
- 最大子段和_算法与数据结构_Python
- c++_cin.getline()与getline() _getline(cin,str,20)
- Linux-文件目录命令
- Scala 按名称传递参数 by-name parameter
- TJU_SCS_软件测试_Lab1
- Jquery设置select控件指定text的值为选中项
- 前端开发利器 - WebStorm
- xml中处理特殊字符和转义字符
- Delphi 设计模式:《HeadFirst设计模式》Delphi7代码---工厂模式之简单工厂[转]