这是学习笔记的第 1977 篇文章

如果抛出一个问题,你是如何理解MySQL解析器的,它和Oracle解析器有什么差别?相信大多数同学都会比较迷茫,因为这个问题很难验证,要不是看源码,要不就是查看书上是怎么说的,其实这两种方法对我们去理解这个问题来说不是很合适,如果能够通过实践来做下理解就好了。

我们可以对问题做一下细化,对一条简单的SQL语句,整体上来说,解析流程如下所示:

整个流程上,我们做一些相关解释:

① 对SQL的文法检查,查看是否有文法错误,比如from、select拼写错误等。

② 在数据字典里校验SQL涉及的对象是否存在。

③ 将对象进行名称转换,比如同义词转义成对应的对象或者select * from test t,其中t是一个同义词指向hr.test。

④ 检查语句的用户是否具有访问对象的权限。

⑤ 生成执行计划。

如何通过测试来验证呢,我们可以试一下以毒攻毒,即用错误的的SQL来推理SQL的解析过程,我们先来看一下在MySQL侧的解析情况。

1)MySQL解析器简单测试

如何在MySQL中进行验证呢, 我们可以在MySQL中创建表test:

使用如下的语句:

Create table test (id int,name varchar(30));

如果我们提交一个语法错误的SQL,在解析方面MySQL提供的信息非常有限,

mysql> select1 id3 from2 test1 where3 id2='aaa' group by4 id1 order by5 id0;

ERROR 1064 (42000): You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'select1 id3 from2 test1 where3 id2='aaa' group by4 id1 order by5 id0' at line 1

这种错误没有下标,也没有明确的错误提示,是难以去理解语法解析的过程的,在对象和权限的解析方面,MySQL的解析方式也相对比较单一,即从左到右。

比如我们需要验证select子句,group by 子句,order by子句的解析顺序。

可以使用下面的语句:

mysql> select id1 from test where id=100 group by id2 order by id3;

ERROR 1054 (42S22): Unknown column 'id1' in 'field list'

错误在select子句,修复select子句,继续测试。

mysql> select id from test where id=100 group by id2 order by id3;

ERROR 1054 (42S22): Unknown column 'id2' in 'group statement'

错误在group by子句,修复group by 子句,继续测试。

mysql> select id from test where id=100 group by id order by id3;

ERROR 1054 (42S22): Unknown column 'id3' in 'order clause'

错误在order by子句

在此,我们需要明确的是,以上对于SQL语句测试,仅仅是简单测试了解析的过程,如果包含limit子句,整个SQL中是如下的顺序来执行的,和解析的方式是有较大的差异的。

1) FROM子句

2) WHERE子句

3) GROUP BY子句

4) HAVING子句

5) ORDER BY子句

6) SELECT子句

7) LIMIT子句

8) 最终结果

为什么解析顺序和执行顺序差别很大呢,归根节点,两种方式的差异总结来说,解析是在做SQL文本的解析,而运行则是在解析的基础上做数据的提取,一个是WHAT(是什么)的思维,一个是HOW(怎么做)的思维。

如果想要做一些较为完整的测试,该怎么办呢,我们可以借鉴Oracle的实现,有的同学可能会想测试Oracle部署环境还是比较麻烦的,其实可以走快捷通道,即Oracle官方提供的在线测试入口:https://livesql.oracle.com,所有的测试和操作都可以在线完成,完全不需要再部署环境了,我们以Oracle 19c的在线环境做测试,来验证下Oracle的解析器实现,加深我们对于SQL解析过程的理解。

2)Oracle解析器简单测试

首先准备一个测试表,如下。

create table test (id number,name varchar2(30));

准备好之后,开始测试。重申一下,思路是用有问题的语句来测试和推理。

下面的语句存在很多的问题,来看看Oracle的反应。

select1 id3 from2 test1 where3 id2='aaa' group by4 id1 order by5 id0;

ORA-20001: Query must begin with SELECT or WITH

解析发现select的语句错误,其实后面的from、where、group by、order by都有错误。但是首先发现的是select的部分,可见解析还是从左至右的方向来做文法解析。

开始修复select的文法错误。

select id1 from2 test1 where3 id1='aaa' group by4 id1 order  by5 id1;

ORA-00923: FROM keyword not found where expected

这个时候错误指向了FROM,进一步论证解析的顺序,我们修复from的错误,开始继续验证。

select id3 from test1 where3 id2='aaa' group by4 id1 order by5 id0;

ORA-00933: SQL command not properly ended

这个时候错误指向了where3,原因在于解析器把where3当作了表test1的别名,修复where的文法错误如下。

select id3 from test1 where id2='aaa' group by4 id1 order by5 id0;

ORA-00924: missing BY keyword

而这次又直接指向了group by的部分。通过这三次错误指向,更能断定文法解析是从左至右。对于是否存在表,是否字段存在问题都不会解析。

如下,修复了group by、order by的文法错误。

select id3 from test1 where id2='aaa' group by id1 order by id0;

ORA-00942: table or view does not exist

这时发现错误指向了test1,提示没有这个表。可见在文法解析之后只是开始校验是否存在这个表,还没有开始校验字段的情况。

修复了表名的错误,看看报错信息。

select id3 from test where id2='aaa' group by id1 order by id0;

ORA-00904: "ID0": invalid identifier

发现是在解析order by 的字段名,对于select、where、group by中的先不解析。

对于不同的Oracle版本,这里的输出结果是不一样的,在11g中是group by,order by的解析顺序,这里仅供参考。

我们修复order by中的错误,继续查看。

select id3 from test where id2='aaa' group by id1 order by id;

ORA-00904: "ID1": invalid identifier

这个时候解析到了group by 子句中的字段值。但是select,where中还没有开始解析。

修复group by 子句中的问题,继续测试。

select id3 from test where id2='aaa' group by id order by id;

ORA-00904: "ID2": invalid identifier

错误指向了where子句,这个时候就剩下了select的部分,修复where的部分。

select id3 from test where id='aaa' group by id order by id;

ORA-00904: "ID3": invalid identifier

通过上面的错误测试,基本能够得到语句解析中的处理顺序,但是这里需要明确的是SQL的解析顺序和SQL数据处理的顺序是不一样的,仅仅作为一种参考的思路,我么来间接验证一下。

比如我们更进一步,查看如果字段ID为number,赋予varchar2的数据,是否会在解析的时候校验出来。

select id from test where id='aaa' group by id order  by id;

no rows selected

从错误来看,目前还没有到执行阶段,是没有办法做出判断的。

而如果我们对表写入数据,再来看看效果。

select id from test where id='aaa' group by id order  by id;

ORA-01722: invalid number

此时会发现错误已经在校验数据的类型了。

当然在这些场景之外,我们还可以测试索引、统计信息的一些场景,限于篇幅就不扩展了,大家可以自行测试。

oracle 测试sql执行时间_通过错误的SQL来测试推理SQL的解析过程相关推荐

  1. oracle 测试sql执行时间_从 TPCH 测试学习性能优化技巧

    一. 目标 TPCH是由TPC(Transaction Processing Performance Council)事务处理性能委员会公布的一套针对数据库决策支持能力的测试基准,通过模拟数据库中与业 ...

  2. sql技巧_您认为不可能的10个SQL技巧

    sql技巧 这样的列表确实有用-它们不仅吸引了人们的注意,如果内容也很有价值(在这种情况下,请相信我),则文章格式可能会非常有趣. 本文将为您带来10条SQL技巧,其中许多人可能都认为不可能. 这篇文 ...

  3. mysql如何定义消耗资源多的sql语句_如何查找消耗资源较大的SQL

    对于优化来讲,查找消耗资源较大的SQL至关重要,下面介绍几个之前用到的SQL. 1.从V$SQLAREA中查询最占用资源的查询. select b.username username,a.disk_r ...

  4. python连oracle数据库参数变量_带绑定字符串变量的Python cx_Oracle SQL

    我在使用Python为Oracle数据库创建SQL查询时遇到了一个问题. 我想绑定字符串变量,但它不起作用,你能告诉我我做错了什么吗? 这是我的代码:import cx_Oracle dokList ...

  5. 软件压力测试的手段有注入错误吗,软件错误注入测试技术研究_陈锦富.pdf

    ISSN 1000-9825, CODEN RUXUEW E-mail: jos@ Journal of Software , Vol.20, No.6, June 2009, pp.1425− 14 ...

  6. python数据库操作批量sql执行_利用Python如何批量修改数据库执行Sql文件

    利用Python如何批量修改数据库执行Sql文件 来源:中文源码网    浏览: 次    日期:2018年9月2日 [下载文档:  利用Python如何批量修改数据库执行Sql文件.txt ] (友 ...

  7. python代码测试工具模块_详解Python中的测试工具

    当我们在写程序的时候,我们需要通过测试来验证程序是否出错或者存在问题,但是,编写大量的测试来确保程序的每个细节都没问题会显得很繁琐.在Python中,我们可以借助一些标准模块来帮助我们自动完成测试过程 ...

  8. 开发环境 测试环境 定义_如何快速搭建ES开发测试环境?

    前段时间,工作需要,自己搭了一个ES测试环境,我把整个部署的过程都做了笔记,在这里也做个归档,有需要的朋友也可以看看. 两大件简介 要安装一个标配的ELK环境,其实应该还有 Logstash,但是由于 ...

  9. python测试开发课程_小蜗分享:Python测试开发全套学习路线

    该楼层疑似违规已被系统折叠 隐藏此楼查看此楼 第一阶段:专业基础课程 阶段目标: 1. 熟练掌握IT核心技术:编程,数据库,操作系统,版本控制 2. 能够熟练运用所学技术搭建各类服务器环境 3. 深入 ...

最新文章

  1. map和foreach的区别和应用场景_支付宝小程序和微信小程序,两者有何区别?
  2. 这个赛道能超车几次?
  3. Android官方开发文档Training系列课程中文版:通知用户之构建通知
  4. 【每周NLP论文推荐】 掌握实体关系抽取必读的文章
  5. ASP数据库插马小议
  6. [Poj 1459] 网络流(一) {基本概念与算法}
  7. Games101现代图形学入门Lecture 3: Transformation知识点总结
  8. 如何写标题摘要关键字
  9. 关于@property的一些用法
  10. 三阶汉诺塔java源代码_如何使用Java实现汉诺塔问题求解
  11. ASUS TUF Gaming B460M PLUS+RX570+BCM94360CD黑苹果EFI引导文件
  12. MSN Message协议分析
  13. 中信银行c语言笔试题库,中信银行笔试IT类复习题参考资料带答案解析.doc
  14. 运维面试官喜欢问的问题
  15. 多商户商城系统功能拆解14讲-平台端会员等级
  16. 高并发系统设计 --基于MySQL构建评论系统
  17. 推进企业使用正版软件工作部际联席会议第四次全体会议(2010)
  18. POJ 3984-迷宫问题 (dfs)
  19. python渲染光线_在python中为图像添加光照效果
  20. 如何使用Windows File Recovery工具在 Windows 10 上恢复丢失的文件

热门文章

  1. css 兼容ie6,ie7,ff的fixed,元素上下端固定定位方法
  2. hadoop源代码组织结构与阅读技巧
  3. 实施ERP系统要先进行思考
  4. Debian rails Puma god 开机启动
  5. 区块链公司发现BCH团队比BTC团队更容易接近
  6. 以太坊经典逆势上涨,行情能否继续?
  7. hive进行词频统计
  8. 浅析python 中__name__ = '__main__' 的作用
  9. Java基础学习——多线程(线程间通信-生产者消费者代码示例)
  10. mysql_config_editor程序的用法