在开发中常听到的 left join,Inner JOIN ,right join ,cross join 这些连接都是数据库的逻辑连接,那么数据库在执行这些连接的时候,数据库是如何在底层实现表的关联的呢?这就是物理连接
目前大部分关系型数据库支持3种物理连接(mysql 貌似到5.6未知仅支持嵌套连接)
数据库的物理连接:
数据库接两个表时候,会考虑3种方法:嵌套连接,合并连接,散列连接。3种方法的连接都有一个表被选为外表(只扫描一次),一个表被选为内表(坑内扫描多次)。如果查询连接了多个表,每次查询只能连接2各表,并保存把中间结果,用户连接另外的表。
1、嵌套连接:外表只扫描一次,而针对外表的每一行都需要扫描一次內表。(注意:连接不能用long或lob字段)
2、合并连接:合并连接需要一个等式连接词(A.col1=B.col1),还要求根据连接列对两个连接的表进行排序。合并连接內表和外表都只扫描一次,有时情况下需要再次扫描內表的部分值,例如,外表存在重复值的情况下。所以优化器通常选择重复值较少的表作为外表。
3、散列连接:散列连接需要一个或多个等式连接谓词,其中每个谓词的类型相同。char类型长度必须相同。decimal进度必须相同。散列连接可以处理多个等式谓词。对于散列连接,首先扫描內表(也称为构件表 build table),表中的行被复制到内存缓冲区。根据“散列键(hash key)”,这些缓冲区被分为几个分区,如果内存中没有足够的空间容纳整个表,则有些分区被写入磁盘上的临时表。然后扫描外表。然后扫描外表(探测表)。对于外表中的每一行,对连接列应用同意散列算法。如果所获得的散列键与行的散列键相匹配,读取分区里面的所有行并应用连接谓词。如果与探测表行匹配的分区在内存中,则读取分区并应用连接谓词将立即进行。如果分区被写入临时表,则探测行也别写入临时表。最后,匹配统一分区行和对应分区被一起处理。

优化器使用3种连接的场景:
嵌套连接:
对于被连接的数据子集较小的情况,nested loop连接是个较好的选择。nested loop就是扫描一个表,每读到一条记录,就根据索引去另一个表里面查找,没有索引一般就不会是 nested loops。
一般在nested loop中, 驱动表满足条件结果集不大,被驱动表的连接字段要有索引,这样就走nstedloop。如果驱动表返回记录太多,就不适合nested loops了。如果连接字段没有索引,则适合走hash join,因为不需要索引。
Inner table被Outer table驱动,outer table返回的每一行都要在inner table中检索到与之匹配的行。
Outer table: 小表、驱动表
Inner table: 被驱动表、大表

哈希连接: 哈希连接是做大数据集连接时的常用方式。优化器扫描小表(或数据源),利用连接键(也就是根据连接字段计算hash值)在内存中建立hash表,然后扫描大表,每读到一条记录就来探测hash表一次,找出与hash表匹配的行。
当小表可以全部放入内存中,其成本接近全表扫描两个表的成本之和。如果表很大不能完全放入内存,这时优化器会将它分割成若干不同的分区,不能放入内存的部分就把该分区写入磁盘的临时段,此时要有较大的临时段从而尽量提高I/O 的性能。临时段中的分区都需要换进内存做hash join。这时候成本接近于全表扫描小表+分区数*全表扫描大表的代价和。
至于两个表都进行分区,其好处是可以使用parallel query,就是多个进程同时对不同的分区进行join,然后再合并。但是复杂。
以下条件下hash join可能有优势:
两个巨大的表之间的连接。
在一个巨大的表和一个小表之间的连接。

合并连接:
对连接的每个表做table access full;
对table access full的结果按照连接键进行排序;
进行merge join对排序结果进行合并。
Sort merge join性能开销几乎都在前两步。相较于前两种连接,合并连接的速度最快的。但也看数据库的索引和数据量情况。

通常情况下河西连接的效果都比合并连接要好,然而如果行源已经被排过序,在执行合并连接时不需要再排序了,这时合并连接的性能会优于哈希连接。
在全表扫描比索引范围扫描再通过rowid进行表访问更可取的情况下,合并会比嵌套性能更佳。

各类关系型数据库都有相应参数可以强制指定那一种连接进行测试。。。

转载于:https://www.cnblogs.com/vansky/p/8900552.html

关系型数据库的物理连接相关推荐

  1. Spring Boot干货系列:数据存储篇-SQL关系型数据库之MyBatis的使用

    Spring Boot干货系列:数据存储篇-SQL关系型数据库之MyBatis的使用 前言 上篇我们介绍了Spring Boot对传统JdbcTemplate的集成,这次换一下,介绍下Spring B ...

  2. mysql 应用前景_图数据库在企业应用中前景如何,相比关系型数据库有哪些优势?...

    图数据虽然在国内的应用还不是非常广泛,但发展前景还是很可观的. 跟以Oracle为代表的传统关系型数据相比,图的逻辑可以很好的解决绝大多数底层数据分析问题, 图数据的数据逻辑维度要远高于关系型数据,所 ...

  3. mysql类exadata功能_几类关系型数据库的数据解决方案

    今天聊下几类关系型数据库的数据解决方案,算是抛砖引玉,近期也要对技术方向上做一些扩展,也算是前期的小结吧. 1 3 Oracle 目前市面上的主流版本应该还是11gR2,记得很多年前有个网站做过一次调 ...

  4. Mac MySQL 数据库配置(关系型数据库管理系统)

    本文已停止更新,点击此链接查看本文最新内容 !!! 前言 MySQL 关系型数据库管理系统. 1.配置准备工作 1)配置数据库准备工作 下载相关软件 mysql-5.7.21-1-macos10.13 ...

  5. 关系型数据库设计要领(值得收藏)

    欢迎关注方志朋的博客,回复"666"获面试宝典 摘要 本文讨论关系数据库设计相关的一些内容,涉及关系模型,表结构设计等内容,以学生选修课程讲述设计过程,在尽量讲清楚设计要领的前提下 ...

  6. 关系型数据库管理系统和SQL介绍

    1. 关系型数据库管理系统的介绍 数据库管理系统(英语全拼:Relational Database Management System,简称RDBMS)是为管理关系型数据库而设计的软件系统,如果大家想 ...

  7. 大数据分析中使用关系型数据库的关键点

    相当一部分大数据分析处理的原始数据来自关系型数据库,处理结果也存放在关系型数据库中.原因在于超过99%的软件系统采用传统的关系型数据库,大家对它们很熟悉,用起来得心应手. 在我们正式的大数据团队,数仓 ...

  8. 关系型数据库和非关系型数据库的优劣对比?

    关系型数据库和非关系型数据库的优劣对比? 关系型数据库和非关系型数据库的优劣对比? 关系型数据库最典型的数据结构是表,由二维表及其之间的联系所组成的一个数据组织. 优点: 1.易于维护:都是使用表结构 ...

  9. 非关系型数据库-NoSQL(Redis)

    文章目录 一.什么是 NoSQL? 二.NoSQL 的特性? 三.什么是 Redis? 四.Redis 安装部署 4.1 下载安装包 4.2 编译安装 4.3 修改配置文件 4.4 启动服务 4.5 ...

  10. 关系型数据库到HBase的数据储存方式变迁

    如今Bigtable型(列族)数据库应用越来越广,功能也很强大.但是很多人还是把它当做关系型数据库在使用,用原来关系型数据库的思维建表.存储.查询.本文以hbase举例讲述数据模式的变化. 传统关系型 ...

最新文章

  1. Java的CountDownLatch和CyclicBarrier的理解和区别
  2. 北大教授吴玺宏:从发声到语言,具身物理模型让NLP回到小数据时代
  3. Android WebView 支持H5的定位Js
  4. python的官方网站地址是什么-python赋值和地址
  5. Codeforces Round #333 (Div. 2) C. The Two Routes flyod
  6. Linux小实验——设备挂载、磁盘分区、格式化、RAID的配置、LVM配置、磁盘配额的配置方法和验证
  7. ADO.NET提供的Connection类总结
  8. vue 修改标题栏_VUE动态修改titile的三种方法
  9. flowable 和 activty工作流 使用视图方案解决系统内部用户、组、用户和组关联
  10. 百度BAE JAVA环境项目部署和调试
  11. python123测试_【测码学院】python自动化测试学习-自动化测试模型
  12. 家电智能化转型之下 长虹在挖什么“坑”?
  13. VIM插件——vimplus安装(centos 7)
  14. springcloud-gateway路由配置和跨域配置
  15. Linux 学习步骤(从入门到精通)
  16. 计算机网络(第五版)读书笔记
  17. 淘宝用户行为分析——通过excel分析
  18. 双系统双硬盘安装(win7 64位+Ubuntu18.04)(固态硬盘+机械硬盘1T)小结
  19. firefox关于about:config的常用配置
  20. 超越函数e^(-x^2)的定积分

热门文章

  1. 1 10000用计算机计算,2019新个税计算器 工资一万要交多少税
  2. allure趋势图无数据
  3. 输入某年某月某日,计算并输出它是这一年的第几天。
  4. Docker网络及资源管理
  5. 从零开始学WEB前端——网页的骨架——HTML实战练习
  6. PyTorch - 27 - 带PyTorch的CNN Confusion Matrix - 神经网络编程
  7. 2022-2028年中国高通量药物筛选与创新药物行业市场调查研究及发展前景展望报告
  8. 28岁程序员晒出脑门照,问以后会秃么?网友:这不已经秃了!
  9. SVN - commit报错“xxx remains in tree-confilict”
  10. allegro更新铜皮方法和快捷键