来源:数据蒋堂

作者:蒋步星

本文长度为2200,建议阅读5分钟

本文为你讲解SQL中用于多表关联的运算JOIN。

JOIN是SQL中用于多表关联的运算,无论从程序员编写还是数据库实现角度来看,JOIN都是SQL中最难的运算。

其实,SQL对JOIN的定义非常简单,就是对两个集合(表)做笛卡尔积后再按某种条件过滤,写出来的语法也就是A JOIN B ON ...的形式。原则上,笛卡尔积后的结果集应当是以两集合成员构成的二元组为成员,不过由于SQL中的集合成员总是有字段的记录,而且也不支持泛型数据类型来描述成员为记录的二元组,所以就简单地把结果集处理成由两表记录的字段合并后构成的新记录集合。这也是JOIN一词在英语中的愿意,并没有乘法(笛卡尔积)的意思。把结果集理解成二元组还是字段合并的记录,都不会影响本文的讨论。

JOIN定义中并没有规定过滤条件的形式。理论上,只要目标结果集是两源集笛卡尔积的子集,都可以理解为JOIN运算。比如,我们可以计算 A JOIN B ON A<B,如果集合A={1,2,3},B={2,3,4},则这个JOIN结果就是{(1,2),(1,3),{1,4),(2,3),{2,4),(3,4)}。

不过,有经验的程序员都知道,现实中绝大多数JOIN都是等值JOIN,即过滤条件是一个或多个相等关系(多个之间是AND关系),语法形如A JOIN B ON A.ai=B.bi  AND ...,其中ai和bi分别是A和B的字段。而前述例子中ON A<B这类称为非等值JOIN,相对少见得多,而且许多情况下非等值JOIN可以转换成等值JOIN来处理,所以我们这里重点讨论等值JOIN。

根据对空值的处理规则,等值JOIN还可以衍生出LEFT JOIN和FULL JOIN,而且一般会被分成一对一、一对多、多对多等几种情况。这些常规术语在所有的SQL教科书都有,这里就不再赘述了。

我们来考察下面三种等值JOIN:

外键表

表A的某些字段与表B的主键关联(所谓关联,是指JOIN的过滤条件即由这些对应字段相等构成)。A表称为事实表,B表称为维表。A表中与B表主键关联的字段称为A指向B的外键,B也称为A的外键表。外键表是多对一的关系,且只有JOIN和LEFT JOIN,一般不会用到FULL JOIN。

典型例子:帐户交易记录和帐户基本信息。

同维表

表A的主键与表B的主键关联,A和B互称为同维表。同维表是一对一的关系,JOIN、LEFT JOIN和FULL JOIN的情况都会有。

典型例子:员工表和销售员表。

主子表

表A的主键与表B的部分主键关联,A称为主表,B称为子表。主子表是一对多的关系,只有JOIN和LEFT JOIN,不会有FULL JOIN。

典型例子:订单和订单明细。

这里说的主键是指逻辑上的主键,也就是在表中取值唯一的字段(组),一个表上可能有多个字段(组)都取值唯一(并不常见),可以认为都是主键。不是一定是在物理表上建立的那个主键。

在SQL的概念体系中并不区分外键表和主子表,多对一和一对多从SQL的观点看来只是关联方向不同,本质上是一回事。确实,订单也可以理解成订单明细的外键表。但是,我们在这里要把它们区分开,将来在简化语法和性能优化时将使用不同的手段。

我们说,这三种JOIN已经涵盖了绝大多数等值JOIN的情况,甚至可以说几乎全部有业务意义的等值JOIN都属于这三类,把等值JOIN限定在这三种情况之中,几乎不会减少其适应范围。

仔细考察这三种JOIN,我们发现所有关联都涉及主键,没有多对多的情况,可以不考虑这种情况吗?

是的!多对多的等值JOIN几乎没有业务意义。

如果JOIN两个表时的关联字段没有涉及到任何主键,那就会发生多对多的情况,而这种情况几乎一定还会有一个规模更大的表把这两个表作为维表关联起来。比如学生表和科目表在JOIN时,会有个成绩表以学生表和科目表作为维表,单纯只有学生表和科目表的JOIN没有业务意义了。

当写SQL时发现多对多的情况,那大概率是这个语句写错了!或者数据有问题!这条法则用于排除JOIN错误很有效。

不过,我们一直在说“几乎”,并没有用完全肯定的说法,也就是说,多对多在非常罕见的情况下也有业务意义。可举一例,用SQL实现矩阵乘法时会发生多对多的等值JOIN,具体写法读者可以自行补充。

笛卡尔积再过滤这种JOIN定义,确实非常简单,而且简单的内涵将得到更大的外延,可以把多对多等值JOIN甚至非等值JOIN等都包括进来。但是,过于简单的内涵无法充分体现出最常见等值JOIN的运算特征。这会导致编写代码和实现运算时就不能利用这些特征,在运算较为复杂时(涉及关联表较多以及有嵌套的情况),无论是书写还是优化都非常困难。而充分利用这些特征后,我们就能创造更简单的书写形式并获得更高效率的运算性能,我们将在以后的文章中逐步说明。

与其为了把罕见情况也包括进来而把运算定义为更通用的形式,还不如把这些情况定义成另一种运算更为合理。

专栏作者简介

润乾软件创始人、首席科学家

清华大学计算机硕士,著有《非线性报表模型原理》等,1989年,中国首个国际奥林匹克数学竞赛团体冠军成员,个人金牌;2000年,创立润乾公司;2004年,首次在润乾报表中提出非线性报表模型,完美解决了中国式复杂报表制表难题,目前该模型已经成为报表行业的标准;2014年,经过7年开发,润乾软件发布不依赖关系代数模型的计算引擎——集算器,有效地提高了复杂结构化大数据计算的开发和运算效率;2015年,润乾软件被福布斯中文网站评为“2015福布斯中国非上市潜力企业100强”;2016年,荣获中国电子信息产业发展研究院评选的“2016年中国软件和信息服务业十大领军人物”;2017年, 自主创新研发新一代的数据仓库、云数据库等产品即将面世。

数据蒋堂

《数据蒋堂》的作者蒋步星,从事信息系统建设和数据处理长达20多年的时间。他丰富的工程经验与深厚的理论功底相互融合、创新思想与传统观念的相互碰撞,虚拟与现实的相互交织,产生出了一篇篇的沥血之作。此连载的内容涉及从数据呈现、采集到加工计算再到存储以及挖掘等各个方面。大可观数据世界之远景、小可看技术疑难之细节。针对数据领域一些技术难点,站在研发人员的角度从浅入深,进行全方位、360度无死角深度剖析;对于一些业内观点,站在技术人员角度阐述自己的思考和理解。蒋步星还会对大数据的发展,站在业内专家角度给予预测和推断。静下心来认真研读你会发现,《数据蒋堂》的文章,有的会让用户避免重复前人走过的弯路,有的会让攻城狮面对扎心的难题茅塞顿开,有的会为初入行业的读者提供一把开启数据世界的钥匙,有的甚至会让业内专家大跌眼镜,产生思想交锋。

往期回顾:

数据蒋堂 | 迭代聚合语法

数据蒋堂 | 非常规聚合

数据蒋堂 | 再谈有序分组

数据蒋堂 | 有序分组

数据蒋堂 | 非等值分组

数据蒋堂 | 还原分组运算的本意

数据蒋堂 | 有序遍历语法

数据蒋堂 | 常规遍历语法

数据蒋堂 | 从SQL语法看离散性

数据蒋堂 | 从SQL语法看集合化

数据蒋堂 | SQL用作大数据计算语法好吗?

数据蒋堂 | SQL的困难源于关系代数

数据蒋堂 | SQL像英语是个善意的错误

数据蒋堂 | 开放的计算能力为数据库瘦身

数据蒋堂 | 计算封闭性导致臃肿的数据库

数据蒋堂 | 怎样看待存储过程的移植困难

数据蒋堂 | 存储过程的利之弊

数据蒋堂 | 不要对自助BI期望过高

数据蒋堂 | 报表的数据计算层

数据蒋堂 | 报表应用的三层结构

数据蒋堂 | 列式存储的另一面

数据蒋堂 | 硬盘的性能特征

数据蒋堂 | 我们需要怎样的OLAP?

数据蒋堂 | 1T数据到底有多大?

数据蒋堂 | 索引的本质是排序

数据蒋堂 | 功夫都在报表外--漫谈报表性能优化

数据蒋堂 | 非结构化数据分析是忽悠?

数据蒋堂 | 多维分析的后台性能优化手段

校对:王红玉

编辑:黄继彦

为保证发文质量、树立口碑,数据派现设立“错别字基金”,鼓励读者积极纠错

若您在阅读文章过程中发现任何错误,请在文末留言,或到后台反馈,经小编确认后,数据派将向检举读者发8.8元红包

同一位读者指出同一篇文章多处错误,奖金不变。不同读者指出同一处错误,奖励第一位读者。

感谢一直以来您的关注和支持,希望您能够监督数据派产出更加高质的内容。

数据蒋堂 | JOIN运算剖析相关推荐

  1. 数据蒋堂 | JOIN延伸 - 维度其它应用

    来源:数据蒋堂 作者:蒋步星 本文长度为1320字,建议阅读3分钟 本文为你讲解JOIN延伸之维度的其他应用. 明确维度定义后,还可以换一种更清晰的方式来审视数据库的结构. 这是我们常见的E-R图: ...

  2. 数据蒋堂 | JOIN延伸 - 维度查询语法

    来源:数据蒋堂 作者:蒋步星 本文长度为1320字,建议阅读3分钟 本文为你讲解JOIN延伸之维度查询语法. 有了维度定义后,我们就可以来梳理前面讲过的简化JOIN语法了. 先定义字段维度: 维度字段 ...

  3. 数据蒋堂 | JOIN延伸 - 维度概念

    来源:数据蒋堂 作者:蒋步星 本文长度为1320字,建议阅读3分钟 本文为你讲解维度概念. 谈到数据分析时常常会用到维度这个词,针对数据立方体的钻取.旋转.切片等操作都是围绕维度进行的,几乎所有的数据 ...

  4. 数据蒋堂 | JOIN提速 - 外键指针的衍生

    来源:数据蒋堂 作者:蒋步星 本文长度为1320字,建议阅读3分钟 本文为你讲解外间指针的衍生. 我们继续讨论外键JOIN,并延用上一篇的例子. 当数据量大到无法全部放进内存时,前述的指针化方法就不再 ...

  5. 数据蒋堂 | JOIN提速 - 外键指针化

    来源:数据蒋堂 作者:蒋步星 本文长度为1520字,建议阅读4分钟 本文为你讲解重新定义JOIN后如何能够提高运算性能. 我们来看重新定义JOIN后如何能够提高运算性能,先看外键式JOIN的情况. 设 ...

  6. 数据蒋堂 | JOIN简化 - 意义总结

    来源:数据蒋堂 作者:蒋步星 本文长度为3000字,建议阅读6分钟 本文为你讲解SQL中用于多表关联的JOIN运算的简化--意义总结. 我们重新审视和定义了等值JOIN运算,并简化了语法.一个直接的效 ...

  7. 数据蒋堂 | JOIN简化 - 消除关联

    来源:数据蒋堂 作者:蒋步星 本文长度为2200字,建议阅读5分钟 本文为你讲解SQL中用于多表关联的JOIN运算的简化--消除关联. 我们将等值JOIN分成三种情况来分别讨论,分情况相当于加强了条件 ...

  8. 数据蒋堂 | 数据库的封闭性

    作者:蒋步星 来源:数据蒋堂 本文共1200字,建议阅读6分钟. 本文与你探讨数据库的封闭性对数据处理效率的影响. 我们知道,数据库的数据处理能力是封闭的.所谓封闭性,这里是指要被数据库计算和处理的数 ...

  9. 数据蒋堂 | 多维分析预汇总的存储容量

    作者:蒋步星 来源:数据蒋堂 本文共1700字,建议阅读7分钟. 本文带你感性认识多维分析方案中的预汇总额外占用的存储空间. 多维分析一般是交互式操作的,也就要求有极高的响应速度,而多维分析涉及的数据 ...

最新文章

  1. Spark Streaming使用Kafka保证数据零丢失
  2. Mac使用自带的屏幕共享实现VNC连接KVM时需要输入密码的问题解决
  3. 野比的示波器案例(Winfrom用户控件)
  4. 【Flutter】Animation 动画 ( Flutter 动画基本流程 | 创建动画控制器 | 创建动画 | 设置值监听器 | 设置状态监听器 | 布局中使用动画值 | 动画运行 )
  5. EasyUI中Datagride数据网格的简单使用
  6. Oracle查找包共用,oracle – 用于查找包的多级依赖关系的脚本
  7. nssl1299-选做作业【最大流,最小割,最大子权闭合图】
  8. bzoj1179 Atm
  9. Redis在windows下安装说明
  10. 51 Nod 阶乘后面0的数量
  11. 大数据之-Hadoop3.x_Yarn_生产环境核心参数配置案例---大数据之hadoop3.x工作笔记0150
  12. PHP基础知识之————PDO预处理语句
  13. 坚果pro2官方rom_坚果pro2线刷包_坚果pro2刷机包_坚果pro2固件包_坚果pro2救砖包 - 线刷宝ROM中心...
  14. 电子邮件接受服务器的端口是,qq电子邮件服务器是什么?端口多少?安全类型是什么?路径前缀是什...
  15. 域名泛解析,二级域名转向问题- -完美解决
  16. 怎么打造云计算的碎片计算方式
  17. MAC地址到IPV6地址的转换
  18. 工厂模式在iOS开发中的实际应用
  19. 文档转换、在线预览的几种方式以及推荐
  20. 揭秘精准诈骗,骗子为何知道你妈是谁

热门文章

  1. dns短域名会引起nslookup解析总解析到一个IP
  2. (多图) 基于并行流水线结构的可重配FIR滤波器的FPGA实现
  3. 构建ASP.NET MVC4+EF5+EasyUI+Unity2.x注入的后台管理系统(32)-swfupload多文件上传[附源码]...
  4. C# 将数据写入DataGridView 中并显示
  5. 为你的网站使用paypal
  6. html列表中float-left,floatleft的作用
  7. springcloud学之前需要掌握什么_学国画之前我们需要准备什么?
  8. 什么是C++模板?_百度知道
  9. UnicodeDecodeError: ‘utf-8‘ codec can‘t decode bytes in position 708-709: invalid continuation byte
  10. sklearn中的RandomForestClassifier参数详解