设计索引的主要目的就是帮助我们快速获取查询结果,而以%开头的like查询则不能够使用B-Tree索引。

考虑到innodb的表都是聚簇表(类似于oracle中的索引组织表),且二级索引叶节点中记录的结构为(索引字段->主键字段),我们可以通过改写sql(mysql优化器比较笨,需要给它足够的提示)采取一种轻量级的方式代替全表扫:

使用索引全扫描找到主键,再根据主键回表获取数据的方法。

这种方式的速度优势在单行记录长度较大、表中记录较多的情况下体现的尤为明显,因为此时索引全扫描带来的IO开销相对于全表扫会小得多。

纸上得来终觉浅,绝知此事要躬行:

创建测试表test,表上有自增主键primary(id)和二级索引idx_name1(name1),表中有500万条数据。

mysql> desc test;

+--------+-------------+------+-----+---------+----------------+

| Field | Type | Null | Key | Default | Extra |

+--------+-------------+------+-----+---------+----------------+

| id | int(11) | NO | PRI | NULL | auto_increment |

| name1 | varchar(20) | YES | MUL | NULL | |

| name2 | varchar(20) | YES | | NULL | |

| name3 | varchar(20) | YES | | NULL | |

| name4 | varchar(20) | YES | | NULL | |

| name5 | varchar(20) | YES | | NULL | |

| name6 | varchar(20) | YES | | NULL | |

| name7 | varchar(20) | YES | | NULL | |

| name8 | varchar(20) | YES | | NULL | |

| name9 | varchar(20) | YES | | NULL | |

| name10 | varchar(20) | YES | | NULL | |

+--------+-------------+------+-----+---------+----------------+

11 rows in set (0.01 sec)

mysql> show index from test\G

*************************** 1. row ***************************

Table: test

Non_unique: 0

Key_name: PRIMARY

Seq_in_index: 1

Column_name: id

Collation: A

Cardinality: 4829778

Sub_part: NULL

Packed: NULL

Null:

Index_type: BTREE

Comment:

Index_comment:

*************************** 2. row ***************************

Table: test

Non_unique: 1

Key_name: idx_name1

Seq_in_index: 1

Column_name: name1

Collation: A

Cardinality: 2414889

Sub_part: NULL

Packed: NULL

Null: YES

Index_type: BTREE

Comment:

Index_comment:

2 rows in set (0.00 sec)

mysql> select count(*) from test;

+----------+

| count(*) |

+----------+

| 5000000 |

+----------+

1 row in set (1.59 sec)

基于name1进行like查询,耗时11.13s,从执行计划看,sql在执行时走的是全表扫描(type: ALL):

mysql> select * from test where name1 like '%O4JljqZw%'\G

*************************** 1. row ***************************

id: 1167352

name1: BO4JljqZws

name2: BrfLU7J69j

name3: XFikCVEilI

name4: lr0yz3qMsO

name5: vUUDghq8dx

name6: RvQvSHHg4p

name7: ESiDbQuK8f

name8: GugFnLtYe8

name9: OuPwY8BsiY

name10: O0oNGPX9IW

1 row in set (11.13 sec)

mysql> explain select * from test where name1 like '%O4JljqZw%'\G

*************************** 1. row ***************************

id: 1

select_type: SIMPLE

table: test

type: ALL

possible_keys: NULL

key: NULL

key_len: NULL

ref: NULL

rows: 4829778

Extra: Using where

1 row in set (0.00 sec)

将sql改写为‘select a. from test a,(select id from test where name1 like '%O4JljqZw%') b where a.id=b.id;’

提示优化器在子查询中使用二级索引idx_name1获取id:

mysql> select a.* from test a,(select id from test where name1 like '%O4JljqZw%') b where a.id=b.id\G

*************************** 1. row ***************************

id: 1167352

name1: BO4JljqZws

name2: BrfLU7J69j

name3: XFikCVEilI

name4: lr0yz3qMsO

name5: vUUDghq8dx

name6: RvQvSHHg4p

name7: ESiDbQuK8f

name8: GugFnLtYe8

name9: OuPwY8BsiY

name10: O0oNGPX9IW

1 row in set (2.46 sec)

mysql> explain select a.* from test a,(select id from test where name1 like '%O4JljqZw%') b where a.id=b.id\G

*************************** 1. row ***************************

id: 1

select_type: PRIMARY

table:

type: ALL

possible_keys: NULL

key: NULL

key_len: NULL

ref: NULL

rows: 4829778

Extra: NULL

*************************** 2. row ***************************

id: 1

select_type: PRIMARY

table: a

type: eq_ref

possible_keys: PRIMARY

key: PRIMARY

key_len: 4

ref: b.id

rows: 1

Extra: NULL

*************************** 3. row ***************************

id: 2

select_type: DERIVED

table: test

type: index

possible_keys: NULL

key: idx_name1

key_len: 63

ref: NULL

rows: 4829778

Extra: Using where; Using index

3 rows in set (0.00 sec)

改写后的sql执行时间缩短至2.46s,效率提升了近4倍!

执行计划分析如下:

step 1:mysql先对二级索引idx_name1进行覆盖扫描取出符合条件的id(Using where; Using index)

step 2:对子step 1衍生出来的结果集table: 进行全表扫,获取id(本案例中只有一个id符合条件)

step 3:最后根据step 2中的id使用主键回表获取数据(type: eq_ref,key: PRIMARY )

总结:

在表中每条记录的长度较大时,通过这种方法改写后的sql效率会有明显提升。

本实验中每条记录的长度还很小(只有100多字节),如果每条记录的长度进一步加大,改写后sql的执行效率会有数量级的提升,大家可以自行验证~

mysql sql优化器_MySQL SQL优化之‘%’相关推荐

  1. mysql 优化器_mysql之优化器、执行计划、简单优化

    mysql> explain select * from employees.employees limit 1\G; *************************** 1. row ** ...

  2. MySQL优化器_MySQL查询优化器

    MySQL优化器 MySQL架构图 讲到MySQL,就绕不开他的架构图.MySQL是一个经典的C/S架构.服务器这边分两层:第一层是Server层,第二层是存储引擎.Server层处理主要的业务操作流 ...

  3. oracle sql 查询优化器,基于ORACLE成本优化器的SQL查询优化分析与应用

    第 39 卷 第 2 期2018 年 3 月 内蒙古农业大学学报( 自 然 科 学 版 ) Journal of Inner Mongolia Agricultural University ( Na ...

  4. mysql or 创建索引_Mysql索引优化

    1.单表索引优化 单表索引优化分析 创建表 建表 SQL CREATE TABLE IF NOT EXISTS article( id INT(10) UNSIGNED NOT NULL PRIMAR ...

  5. mysql关键字及其用法_mysql的优化-explain

    原文链接地址 [MySQL优化]--看懂explain_数据库_贾文静-CSDN博客​blog.csdn.net explain explain模拟优化器执行SQL语句,在5.6以及以后的版本中,除过 ...

  6. mysql cbo优化器_Oracle的优化器(Optimizer) (CBO优化) 分享

    Oracle在执行一个SQL之前,首先要分析一下语句的执行计划,然后再按执行 计划去执行.分析语句的执行计划的工作是由优化器(Optimiz Oracle的优化器(Optimizer) (CBO优化) ...

  7. Oracle执行计划。RBO优化器和CBO优化器。TABLE ACCESS FULL,TABLE ACCESS BY INDEX ROWID,TABLE ACCESS BY INDEX SCAN

    文章目录 通过PL/SQL Developer查看查询的执行计划 1. 什么是执行计划 2. 配置执行计划需要显示的项 3执行计划的常用列字段解释 4. 使用执行计划 5. 查看执行计划 5.1 执行 ...

  8. DL之DNN优化技术:DNN优化器的参数优化—更新参数的四种最优化方法(SGD/Momentum/AdaGrad/Adam)的案例理解、图表可视化比较

    DL之DNN优化技术:DNN优化器的参数优化-更新参数的四种最优化方法(SGD/Momentum/AdaGrad/Adam)的案例理解.图表可视化比较 目录 四种最优化方法简介 优化器案例理解 输出结 ...

  9. 谷歌推出新优化器Lion:优化算法的符号发现

    文章目录 谷歌推出新优化器Lion:优化算法的符号发现 Lion VS AdamW 论文实验 1.图像分类 2.视觉语言对比学习 3.扩散模型 4.语言建模和微调 5.与其他流行优化器的比较 超参数设 ...

最新文章

  1. vs 属性 环境变量
  2. LeetCode 17电话号码的字母组合(搜索)18四数之和
  3. B2B电子商务网站杂谈
  4. Spring启动和缓存抽象
  5. Zend Debugger 配置
  6. django-后台管理-编辑页的选项
  7. No migrations to apply.(django不能创建数据库中的表的问题)makemigrations/migrate
  8. 位运算之二进制中1的个数
  9. Teamcenter2007 安装步骤
  10. 如何在SQL Server中检查日期是否为假期
  11. unrecognized selector sent to class 0x235e7ec
  12. window窗口切换快捷键
  13. 【古代文学论文】酒文化传播中唐代文学的作用分析(节选)
  14. 王之泰201771010131《面向对象程序设计(java)》第十二周学习总结
  15. 收集的一些驱动 (小米WiFi、全民WiFi、小度WiFi)
  16. 从原型图到成品:步步深入CSS布局
  17. 彻悟人生,句句肺腑!!(被千万人转载的一篇文章)
  18. cannot assign slice from input of different size
  19. 基于小波变换的图像压缩算法SPIHT算法
  20. 三维数据处理软件架构

热门文章

  1. This relative module was not found ./cptable webpack
  2. spring cloud gateway url重写
  3. sql 简单加密函数
  4. 一对一,一对多,多对多查询 (注解写法)
  5. 利用ado.net和winform连接ms Server可以做什么?
  6. 1016 部分A+B (15分)
  7. oracle开启日志服务,Oralce 归档日志开启与关闭示例
  8. 【算法设计与分析】02 货郎问题与计算复杂性理论
  9. Selenium 自动化测试基础知识
  10. solr的一些查询语法