一文搞懂MySQL体系架构!!
写在前面
很多小伙伴工作很长时间了,对于MySQL的掌握程度却仅仅停留在表面的CRUD,对于MySQL深层次的原理和技术知识了解的少之又少,随着工作年限的不断增长,职场竞争力却是不断降低的。很多时候,出去面试时,被面试官吊打的现象成了家常便饭。比如,对于MySQL的高频面试题有:
- 说说MySQL中MVCC机制的原理?
- MySQL的事务原理和实现?
- MySQL数据主从复制的原理?
- MySQL底层数据的存储结构?
- 如何使MySQL支持海量数据存储?
- MySQL中的锁机制原理和实现?
- MySQL索引机制?索引中涉及的数据结构和算法?
- MySQL为何使用B+树作为索引结构?
- B+树可以存放多少数据?
- 说说MySQL中间隙锁的实现原理?
- InnoDB引擎为何会崩溃?说说其实现原理?
- 等等其他一系列高频面试
如果一一列举的话,大概能够列举上百个关于MySQL的高频面试题,这些你都会吗?
不仅仅是面试,如果你想从一名底层程序员上升为高级工程师,架构师等,MySQL的底层原理和技术是你必须要掌握的。
MySQL体系架构
我们先来看看MySQL的体系架构图,如下所示。
从MySQL的架构图,我们可以看出MySQL的架构自顶向下大致可以分为网络连接层、数据库服务层、存储引擎层和系统文件层四大部分。接下来,我们就来简单说说每个部分的组成信息。
网络连接层
网络连接层位于整个MySQL体系架构的最上层,主要担任客户端连接器的角色。提供与MySQL服务器建立连接的能力,几乎支持所有主流的服务端语言,例如:Java、C、C++、Python等,各语言都是通过各自的API接口与MySQL建立连接。
数据库服务层
数据库服务层是整个数据库服务器的核心,主要包括了系统管理和控制工具、连接池、SQL接口、解析器、查询优化器和缓存等部分。
连接池
主要负责存储和管理客户端与数据库的连接信息,连接池里的一个线程负责管理一个客户端到数据库的连接信息。
系统管理和控制工具
提供数据库系统的管理和控制功能,例如对数据库中的数据进行备份和恢复,保证整个数据库的安全性,提供安全管理,对整个数据库的集群进行协调和管理等。
SQL接口
主要负责接收客户端发送过来的各种SQL命令,并将SQL命令发送到其他部分,并接收其他部分返回的结果数据,将结果数据返回给客户端。
解析树
主要负责对请求的SQL解析成一棵“解析树”,然后根据MySQL中的一些规则对“解析树”做进一步的语法验证,确认其是否合法。
查询优化器
在MySQL中,如果“解析树”通过了解析器的语法检查,此时就会由优化器将其转化为执行计划,然后与存储引擎进行交互,通过存储引擎与底层的数据文件进行交互。
缓存
MySQL的缓存是由一系列的小缓存组成的。例如:MySQL的表缓存,记录缓存,MySQL中的权限缓存,引擎缓存等。MySQL中的缓存能够提高数据的查询性能,如果查询的结果能够命中缓存,则MySQL会直接返回缓存中的结果信息。
存储引擎层
MySQL中的存储引擎层主要负责数据的写入和读取,与底层的文件进行交互。值得一提的是,MySQL中的存储引擎是插件式的,服务器中的查询执行引擎通过相关的接口与存储引擎进行通信,同时,接口屏蔽了不同存储引擎之间的差异。MySQL中,最常用的存储引擎就是InnoDB和MyISAM。
InnoDB和MyISAM存储引擎需要小伙伴们重点掌握,高频面试考点,也是成为架构师必知必会的内容。
系统文件层
系统文件层主要包括MySQL中存储数据的底层文件,与上层的存储引擎进行交互,是文件的物理存储层。其存储的文件主要有:日志文件、数据文件、配置文件、MySQL的进行pid文件和socket文件等。
日志文件
MySQL中的日志主要包括:错误日志、通用查询日志、二进制日志、慢查询日志等。
- 错误日志
主要存储的是MySQL运行过程中产生的错误信息。可以使用下面的SQL语句来查看MySQL中的错误日志。
show variables like '%log_error%';
- 通用查询日志
主要记录MySQL运行过程中的一般查询信息,可以使用下面的SQL语句来查看MySQL中的通用查询日志文件。
show variables like '%general%';
- 二进制日志
主要记录对MySQL数据库执行的插入、修改和删除操作,并且也会记录SQL语句执行的时间、执行的时长,但是二进制日志不记录select、show等不修改数据库的SQL。主要用于恢复数据库的数据和实现MySQL主从复制。
查看二进制日志是否开启。
show variables like '%log_bin%';
查看二进制日志的参数
show variables like '%binlog%'
查看日志文件
show binary logs;
- 慢查询日志
慢查询主要记录的是执行时间超过指定时间的SQL语句,这个时间默认是10秒。
查看是否开启慢查询日志
show variables like '%slow_query%';
查看慢查询设置的时长
show variables like '%long_query_time%'
数据文件
数据文件中主要包括了:db.opt文件、frm文件、MYD文件、MYI文件、ibd文件、ibdata文件、ibdata1文件、ib_logfile0和ib_logfile1文件等。
- db.opt文件
主要记录当前数据库使用的字符集和检验规则等信息。
- frm文件
存储数据表的结构信息,主要是数据表相关的元数据信息,包括数据表的表结构定义信息,每张表都会有一个frm文件。
值得注意的是:MySQL8版本中的innodb存储引擎的表没有frm文件。(后面专门写一些MySQL8新特性的文章,从使用到底层原理与MySQL5到底有何不同)。
- MYD文件
MyISAM存储引擎专用的文件格式,主要存放MyISAM存储引擎数据表中的数据,每张MyISAM存储引擎表对应一个.MYD文件。
- MYI文件
MyISAM存储引擎专用的文件格式,主要存放与MyISAM存储引擎数据表相关的索引信息,每张MyISAM存储引擎表对应一个.MYI文件。
- ibd文件
存放Innodb存储引擎的数据文件和索引文件,主要存放的是独享表空间的数据和索引,每张表对应一个.ibd文件。
- ibdata文件
存放Innodb存储引擎的数据文件和索引文件,主要存放的是共享表空间的数据和索引,所有表共用一个(或者多个).ibdata文件,可以根据配置来指定共用的.ibdata文件个数。
- ibdata1文件
MySQL的系统表空间数据文件,主要存储MySQL的数据表元数据、Undo日志等信息。
- ib_logfile0和ib_logfile1文件
MySQL数据库中的Redo log文件,主要用于MySQL实现事务的持久性。如果在某个时间点MySQL发生了故障,此时如果有脏页没有写入到数据库的ibd文件中,在重启MySQL的时候,MySQL会根据Redo Log信息进行重做,将写入Redo Log并且尚未写入数据表的数据进行持久化操作。
配置文件
用于存在MySQL所有的配置信息,在Unix/Linux环境中是my,cnf文件,在Windows环境中是my.ini文件。
pid文件
pid文件是存放MySQL进程运行时的进程号的文件,主要存在于Unix/Linux环境中,具体的存储目录可以在my.cnf或者my.ini文件中进行配置。
socket文件
socket文件和pid文件一样,都是MySQL在Unix/Linux环境中运行才会有的文件。在Unix/Linux环境中,客户端可以直接通过socket来连接MySQL。
总结了很多有关于java面试的资料,希望能够帮助正在学习java的小伙伴。由于资料过多不便发表文章,创作不易,望小伙伴们能够给我一些动力继续创建更好的java类学习资料文章,
请多多支持和关注小作,别忘了点赞+评论+转发。右上角私信我回复【03】即可领取免费学习资料谢谢啦!
一文搞懂MySQL体系架构!!相关推荐
- 一文搞懂MySQL数据库分库分表
如果数据量过大,大家一般会分库分表.分库需要注意的内容比较少,但分表需要注意的内容就多了. 工作这几年没遇过数据量特别大的业务,那些过亿的数据,因为索引设置合理,单表性能没有影响,所以实战中一直没用过 ...
- 一文搞懂MySQL XA如何实现分布式事务
一文搞懂MySQL XA如何实现分布式事务 前言 XA 协议 如何通过MySQL XA实现分布式事务 前言 MySQL支持单机事务的良好表现毋庸置疑,那么在分布式系统中,涉及多个节点,MySQL又是如 ...
- 一文搞懂 MySQL 索引
一文搞懂 MySQL 索引 1.MySQL 索引 简介 1.1.MySQL 索引 是什么? 索引是一个单独的.存储在 磁盘 上的 数据库结构 ,包含着对数据表里 所有记录的 引用指针. 1.2. M ...
- 1分钟搞懂MIL体系架构及功能模块详细介绍
目录 MIL体系架构 MIL核心功能模块 MIL功能模块详细描述 点对点运算 统计学运算 滤波处理 形态学运算 几何变换 快速傅里叶变换 图像分割 粒子(BLOB)分析 特征计算 图像测量 校正 JP ...
- JAVA秒杀mysql层实现_一文搞懂MySQL的Join,聊一聊秒杀架构设计
正文 MySQL的Join到底能不能用 经常听到2种观点: join性能低,尽量少用 多表join时,变为多个SQL进行多次查询 其实对于上面的观点一定程度上是正确的,但不是完全正确.但之所以流传这么 ...
- 一文搞懂MySQL的Join
点击上方 "程序员小乐" ,关注公众号 8点20分,第一时间与你相约 每日英文 A single hand that wipes tears during failures is ...
- ❤『知识集锦』一文搞懂mysql索引!!(建议收藏)
作者:不吃西红柿 简介:CSDN博客专家.蓝桥签约作者.大数据领域优质创作者. 以我的资历和文凭,将来这个城市的大街,都归我扫. [系列课程介绍] 『面试知识集锦』系列课程包括以下20个系列,超过 ...
- 一文搞懂 | ARM微架构的变化
一.引言 伴随智能手机的高速发展,移动处理器架构设计厂商ARM公司几乎每年都更新CPU的核心架构.从2018至2020年,ARM公司基于ARMv8架构推出了三代Cortex-A76.Cortex-A7 ...
- 一文读懂 MySQL 底层架构实现
文章目录 1. MySQL 的逻辑架构 1.1 Server 层 1.2 存储引擎层 1.3 一条 SQL 语句执行流程中每个组件的作用 1.3.1 连接器 1.3.2 查询缓存 1.3.3 分析器 ...
最新文章
- ps -aux|grep 详细信息
- InsightFace及其mxnet、tensorflow代码实现
- python电子病历数据挖掘_数据挖掘技术在基于XML的电子病历中的应用研究
- 我是如何使用git把本地代码上传到CODECHINA上的,值得借鉴
- vue-router各个属性的作用及用法
- vue-countTo---简单好用的一个数字滚动插件
- 47. Use traits for information about types.
- 基于D-S证据理论的数据融合算法的研究
- 超市便利店批发行业企业仓库,使用盘点机PDA扫描商品条码高效盘点,库存管不准怎么办
- xmlspy xmlviewer
- 2014年个人工作愿景
- 批量追踪中通快运物流,并将信息导出EXCEL表格
- 打印机怎么选择双面打印,支持双面打印资料的平台
- 密码锁 Locker
- php神盾解密工具 注册码_教你如何解密 “ PHP 神盾解密工具 ”
- 最大信息系数(MIC)——大数据时代的相关性分析
- MATLAB--数字图像处理 图像噪声与滤波处理
- 解决HP电脑windows10系统提示未插入音频设备
- 前端(JQuery):使用magnify插件实现图片预览
- Mirantis、 IBM对OpenStack进行性能测试,规模达到75000个虚拟机(转)
热门文章
- 关于SVM一篇比较全介绍的博文
- PNG透明图片在IE浏览器中正确显示
- Glide如何加载项目中的图片资源
- The type javax.servlet.http.HttpServletRequest cannot be resolved. It is indirectly referenced fro
- 阿里P8耗时3年,总结的Java面试复盘手册,带你挑战50万年薪
- 2021年危险化学品经营单位安全管理人员复审考试及危险化学品经营单位安全管理人员模拟考试
- 星巴克推出首个黄金档嘉宾“夜聊”节目;阿华田中国首发两款新品;帝亚吉欧中国首家麦芽威士忌酒厂正式动工 | 食品饮料新品...
- cocos creator游戏发布和部署-HTML5篇
- Yolov6解决常见报错(1)TypeError numpy.float64 object cannot be interpreted as an index
- Mono 3.2 测试NPinyin 中文转换拼音代码