Flink SQL中使用Calcite作为sql语法解析、校验、优化工具,本篇是实操篇,介绍一下calcite做sql语法解析使用方式。

sql经过calcite解析之后,得到一棵抽象语法树,也就是我们说的AST,这棵语法树是由不同的节点组成,节点称之为SqlNode,根据不同类型的dml、ddl得到不同的类型的SqlNode,例如select语句转换为SqlSelect,delete语句转换为SqlDelete,join语句转换为SqlJoin。

使用方式:SqlParser.Config config = SqlParser.configBuilder()         .setLex(Lex.MYSQL) //使用mysql 语法         .build();//SqlParser 语法解析器         SqlParser sqlParser = SqlParser       .create("select id,name,age FROM stu where age<20", config);SqlNode sqlNode = null;try {   sqlNode = sqlParser.parseStmt();} catch (SqlParseException e) {  throw new RuntimeException("", e);}这里解析了一个select的语句,那么得到的sqlNode就是一个SqlSelect。if(SqlKind.SELECT.equals(sqlNode.getKind())){SqlSelect sqlSelect = (SqlSelect) sqlNode;SqlNode from=sqlSelect.getFrom();SqlNode where=sqlSelect.getWhere();SqlNodeList selectList=sqlSelect.getSelectList();//标识符if(SqlKind.IDENTIFIER.equals(from.getKind())){System.out.println(from.toString());}if(SqlKind.LESS_THAN.equals(where.getKind())){SqlBasicCall sqlBasicCall=(SqlBasicCall)where;for(SqlNode sqlNode1: sqlBasicCall.operands){if(SqlKind.LITERAL.equals(sqlNode1.getKind())){System.out.println(sqlNode1.toString());}}}selectList.getList().forEach(x->{if(SqlKind.IDENTIFIER.equals(x.getKind())){System.out.println(x.toString());}});}一个select语句包含from部分、where部分、select部分等,每一部分都表示一个SqlNode。SqlKind是一个枚举类型,包含了各种SqlNode类型:SqlSelect、SqlIdentifier、SqlLiteral等。SqlIdentifier表示标识符,例如表名称、字段名;SqlLiteral表示字面常量,一些具体的数字、字符。

SqlBasicCall对比SqlSelect/SqlDelete而言,可以理解为表示的是一些基本的、简单的调用,例如聚合函数、比较函数等,接下来看一下其如何解析sum操作:select sum(amount) FROM orders //解析的sql//解析select部分selectList.getList().forEach(x->{    if(SqlKind.SUM.equals(x.getKind())){      SqlBasicCall sqlBasicCall=(SqlBasicCall)x;      System.out.println(sqlBasicCall.operands[0]);   } });其内部主要就是operands,也是SqlNode节点,但是都是一些基本的SqlNode,例如SqlIdentifier、SqlLiteral。

SqlSelect/SqlDelete/SqlBasicCall 都称之为SqlCall,差别是SqlSelect是复杂的SqlCall,内部可以包含其他节点,而SqlBasicCall表示简单的SqlCall。另外两种SqlNode:SqlDataTypeSpec与SqlNodeList,SqlDataTypeSpec代表数据类型节点,例如CHAR/VARCHAR/DOUBLE, SqlNodeList表示包含多个同级别的SqlNode,在上面select中已经展示过,看下SqlDataTypeSpec使用实例:select cast(amount as CHAR) FROM orders//解析的sql//解析select部分selectList.getList().forEach(x->{   if(SqlKind.CAST.equals(x.getKind())){        SqlBasicCall sqlBasicCall=(SqlBasicCall)x;        System.out.println(sqlBasicCall.operands[0]); //amount        SqlDataTypeSpec charType=(SqlDataTypeSpec)sqlBasicCall.operands[1];        System.out.println(charType.getTypeName()); //CHAR  }});

另外一种节点SqlOperator,可以代表函数、运算符、语法(select)结构,例如sum解析为SqlAggFunction、select解析为SqlSelectOperator,as 作为SqlAsOperator。SqlOperator是被嵌入在SqlNode中,作为其属性,通过SqlOperator的createCall方法可以创建对应的SqlNode,使用方式:SqlOperator operator = new SqlAsOperator();SqlParserPos sqlParserPos = new SqlParserPos(1, 1);SqlIdentifier name = new SqlIdentifier("orders", null, sqlParserPos);SqlIdentifier alias = new SqlIdentifier("o", null, sqlParserPos);SqlNode[] sqlNodes = new SqlNode[2];sqlNodes[0] = name;sqlNodes[1] = alias;SqlBasicCall sqlBasicCall = (SqlBasicCall)operator.createCall(sqlParserPos,sqlNodes);System.out.println(sqlBasicCall); //得到的就是 Order as oSqlParsePos表示对应解析的节点在sql位置,起止行与起止列。

以上介绍了一下calcite解析sql的简单使用方式,我们可以使用Calcite来做血缘分析、flink sql维表关联等。

calcite连接mysql_使用Calcite做Sql语法解析相关推荐

  1. 使用ANTLR做一个简单的Python SQL语法解析器 - 推酷

    使用ANTLR做一个简单的Python SQL语法解析器 - 推酷 使用ANTLR做一个简单的Python SQL语法解析器 - 推酷 posted on 2016-11-14 13:11 lexus ...

  2. calcite连接mysql_如何使用Calcite实现一个简单的数据库

    说道Calcite你可能有些陌生, 但提及Hive.Kylin.Apache Drill.Flink等一定不会陌生,这些都是在我们日常工作中经常用到的,如上这些都是基于Calcite实现查询引擎,还有 ...

  3. squirrel连接mysql_数据库管理工具——SQuirreL SQL Client使用入门

    标签: 简单介绍: SQuirrel SQL Client是一个用Java写的数据库客户端,用JDBC统一数据库访问接口以后,可以通过一个统一的用户界面来操作MySQL PostgreSQL MSSQ ...

  4. dapper 连接mysql_使用Dapper访问SQL Server数据库

    对应Demo程序名:DapperDemo 准备工作:为项目安装Dapper类库 方法一:项目中添加:项目名右键:Manage NuGet Packages:搜索Dappe:点击安装 方法二:在NuGe ...

  5. java sql语法解析_Java中的SQL语句解析

    String sql = "SELECT userId,password FROM Table_1 where userId ='" + userId +"' and p ...

  6. 语法解析及Antlr

    目录 1 语法解析 1.1 语法解析器 1.1.1 执行流程 1.1.2  语法树好处 1.1.3 解析方法LL与LR 1.1.4 抽象语法树(AST) 1.2  语法规则文件 2 Antlr 2.1 ...

  7. sqlparser mysql_SQL语法解析器JSQLParser | IT瘾

    相关 [sql 语法 解析器] 推荐: SQL 语法解释器jsqlparser. 是用java 开发的解析器, 可以生成java类层次结构.. 可以完美解析 表的 增删查改等操作.. 展开它的源码你会 ...

  8. CSS大会 | 打破常“规”:挖掘语法解析器规则漏洞

    2019年7月30-31日,第五届互联网安全领袖峰会(CSS 2019)在北京开幕.作为前沿技术安全研究团队代表,Tencent Blade Team两位高级安全研究员受邀登台,探讨如何挖掘语法解析器 ...

  9. mysql ddl 语法解析工具_sharding-sphere之语法解析器

    语法解析器,根据不同类型的语句有不同的语法解析器去解析成成SQLStatement,SQL解析器的类图我用脑图画出来如下: SQLParser.png 可以看到,不同的sql有不同的处理解析器去解析, ...

最新文章

  1. 安装numpy,setuptools的时候,不能再注册表中识别出来python2.7
  2. 纯新手DSP编程--5.21--CCS高级工具的使用
  3. 若无云,岂有风——词语语义相似度计算简介
  4. oracle 10g下载百度云地址
  5. python抽签小程序
  6. 网络工程专业大学生,需要考HICE吗?
  7. MATLAB FFT与fftshift
  8. 如何给PDF设置可跳转目录的2种方法
  9. 川师计算机类专业收分安徽,四川师范大学专业收分
  10. 流量定向转通用片面教程
  11. Github安卓流行布局开源库
  12. linux下yum源配置
  13. Unable to find a specification forXXnot added the source repo that hosts the Podspec to your Podfile
  14. 【计算机取证期末复习题】
  15. 你不知道的箭头函数???
  16. 无线传感网络定向扩散路由仿真matlab,无线传感网络(习题)精选.doc
  17. mysql常用DDL基本语法
  18. 可视化财务报表不会做?那是你没用对报表工具
  19. 自动保存微信的小视频
  20. 云南之行 - 古城印象

热门文章

  1. mysql 字符转数值_深入MYSQL字符数字转换的详解
  2. android绘制环形进度_Android动态自定义圆形进度条
  3. 【C++深度剖析教程28】C++对象模型分析
  4. ubuntu下的对拍
  5. Centos7.5 lnmp+mongodb扩展
  6. 关于php的字符串编码
  7. hdu4353 Finding Mine三角形内的点数
  8. 程序员九重镜界,很老的今天刚刚翻出来
  9. 数据结构一—— 数组
  10. mysql 索引计划_Mysql索引、查询计划、优化方向