mysql innodb 分区_MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测)
/ -------------------- 写在最前面 --------------------------------/
如果表分区使用的是:innodb数据库引擎,要把分区技术做成功必须设置表为独立表空间
/ -------------------- 写在最前面 -- end --------------------------------/
一、什么是表分区
通俗地讲表分区是将一大表,根据条件分割成若干个小表。mysql5.1开始支持数据表分区了。
如:某用户表的记录超过了1000万条,那么就可以根据入库日期将表分区,也可以根据所在地将表分区。当然也可根据其他的条件分区。
二、为什么要对表进行分区
为了改善大型表以及具有各种访问模式的表的可伸缩性,可管理性和提高数据库效率。
分区的一些优点包括:
1)、与单个磁盘或文件系统分区相比,可以存储更多的数据。
2)、对于那些已经失去保存意义的数据,通常可以通过删除与那些数据有关的分区,很容易地删除那些数据。相反地,在某些情况下,添加新数据的过程又可以通过为那些新数据专门增加一个新的分区,来很方便地实现。通常和分区有关的其他优点包括下面列出的这些。MySQL分区中的这些功能目前还没有实现,但是在我们的优先级列表中,具有高的优先级;我们希望在5.1的生产版本中,能包括这些功能。
3)、一些查询可以得到极大的优化,这主要是借助于满足一个给定WHERE语句的数据可以只保存在一个或多个分区内,这样在查找时就不用查找其他剩余的分区。因为分区可以在创建了分区表后进行修改,所以在第一次配置分区方案时还不曾这么做时,可以重新组织数据,来提高那些常用查询的效率。
4)、涉及到例如SUM()和COUNT()这样聚合函数的查询,可以很容易地进行并行处理。这种查询的一个简单例子如 “SELECT salesperson_id, COUNT (orders) as order_total FROM sales GROUP BY salesperson_id;”。通过“并行”,这意味着该查询可以在每个分区上同时进行,最终结果只需通过总计所有分区得到的结果。
5)、通过跨多个磁盘来分散数据查询,来获得更大的查询吞吐量。
三、分区类型
· RANGE分区:基于属于一个给定连续区间的列值,把多行分配给分区。
· LIST分区:类似于按RANGE分区,区别在于LIST分区是基于列值匹配一个离散值集合中的某个值来进行选择。
· HASH分区:基于用户定义的表达式的返回值来进行选择的分区,该表达式使用将要插入到表中的这些行的列值进行计算。这个函数可以包含MySQL 中有效的、产生非负整数值的任何表达式。
· KEY分区:类似于按HASH分区,区别在于KEY分区只支持计算一列或多列,且MySQL 服务器提供其自身的哈希函数。必须有一列或多列包含整数值。
1.RANGE分区
基于属于一个给定连续区间的列值,把多行分配给分区。这些区间要连续且不能相互重叠,使用VALUES LESS THAN操作符来进行定义。以下是实例。
2.LIST分区
类似于按RANGE分区,区别在于LIST分区是基于列值匹配一个离散值集合中的某个值来进行选择。
LIST分区通过使用“PARTITION BY LIST(expr)”来实现,其中“expr” 是某列值或一个基于某个列值、并返回一个整数值的表达式,然后通过“VALUES IN (value_list)”的方式来定义每个分区,其中“value_list”是一个通过逗号分隔的整数列表。
3.HASH分区
基于用户定义的表达式的返回值来进行选择的分区,该表达式使用将要插入到表中的这些行的列值进行计算。这个函数可以包含MySQL 中有效的、产生非负整数值的任何表达式。
要使用HASH分区来分割一个表,要在CREATE TABLE 语句上添加一个“PARTITION BY HASH (expr)”子句,其中“expr”是一个返回一个整数的表达式。它可以仅仅是字段类型为MySQL 整型的一列的名字。此外,你很可能需要在后面再添加一个“PARTITIONS num”子句,其中num 是一个非负的整数,它表示表将要被分割成分区的数量。
4.KSY分区
类似于按HASH分区,区别在于KEY分区只支持计算一列或多列,且MySQL 服务器提供其自身的哈希函数。必须有一列或多列包含整数值。
不同的表分区对比如下:
下面来操作MySQL表分实例操作主要讲解 Range分区技术
注意为了查看方便我这边对mysql操作都是用客户端工具Navicat For Mysql 进行连接操作。
1.创建分区表,按日期和年份拆分 使用的是 myisam 引擎
2.创建未分区表,主要用于作对比表字段和结构和分区表一模一样。
3.创建测试数据这里使用存储过程快速创建100万行数据测试数据越多越方便查看,这里只测试100万行根据个人需求插入,因只是用日期分区,其他列不住细节深究。只关注日期列。
4.执行存储过程插入数据
5.进入查看我们刚才的分区表,数据库安装都是常规的路径,测试数据名称为test
显示如上信息说明已经创建完成。
6.复制数据到未分区表no_part_tab
7.测试SQL 的性能分别查询1年的数据。
7.1)分区表的性能
7.2)未分区表的性能
查询时间非常明显的区别,注意数据量越大越明显。
8.为何会分区会有如此大的区别我们通过查询计划分析。
8.1)分区的查询计划影响的行数是:99813
8.2)未分区查询计划影响的行数是:1000000
很明显查询条件的数据是在p1分区 所以查询的只会查询这分区,查询效果就显而易见。
9.增加未索引字段查询
查看执行时间2.55s
查看执行时间11.16s
对比时间差距还是很大的具体查询时间根据个人计算机性能已经数据大小进行测试,数据量越大越明显。
四.innodb表分区
在innodb数据库引擎中要把分区技术做成功必须设置表为独立表空间特别注意这点。
1.什么是共享表空间和独立表空间
贡献表空间已经独立表空间都是针对数据的存储方式而言的。
贡献表空间:某一个数据库的所有的表数据,索引文件全部放在一个文件中,默认这个共享表空间的文件路径在data目录下。默认的文件名为ibdata1初始大小为10M。
独占表空间:每个表都将会生成意独立文件方式来进行存储,每个表都有一个.frm表描述,还有一个.dbd文件.其中这个文件包括了单独一个表数据内容以及索引内容,默认情况下它的存储位置也是在表的位置之中。
2.共享表空间:
优点:
可以放表空间分成多文件存放各个磁盘上(表空间文件大小不受表大小的限制,如一个表可以分布在不同的文件上)。
数据和文件放一起方便管理。
缺点:
所有的数据和索引存放到一个文件中讲有一个很大的文件,虽然可以把一个大文件分成多个小文件,但是多个表及索引在表空间中混合存储,这样对于一个表做了大量删除操作后表空间中将会有大量的空隙,特别是对于统计分析,日志系统这类应用最不合适用共享表空间。
3.实际操作
开启innodb数据库引擎独立表空间。
编辑my.cnf 增加innodb_file_per_table=1
只有设置了innodb 引擎的独立表空间才能做成功表分区,特别注意。【win下无需设置】
mysql innodb 分区_MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测)相关推荐
- MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测)
MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测) 一.什么是表分区 通俗地讲表分区是将一大表,根据条件分割成若干个小表.mysql5.1开始支持数据表分区了. 如:某用户表的记录超过 ...
- mysql 社区版 innodb_MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测)
MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测) / -------------------- 写在最前面 ------------------ ...
- mysql myisam表分区_MySQL 表分区详解MyiSam引擎和InnoDb 区别(实测)
一.什么是表分区 通俗地讲表分区是将一大表,根据条件分割成若干个小表.mysql5.1开始支持数据表分区了. 如:某用户表的记录超过了1000万条,那么就可以根据入库日期将表分区,也可以根据所在地将表 ...
- mysql 插入加锁_Mysql加锁过程详解(9)-innodb下的记录锁,间隙锁,next-key锁
你需要知道的 之前我们介绍了排他锁,其实innodb下的记录锁(也叫行锁),间隙锁,next-key锁统统属于排他锁. 行锁 记录锁其实很好理解,对表中的记录加锁,叫做记录锁,简称行锁. 生活中的间隙 ...
- MySQL按某个字段建立表分区_mysql表分区
1. 概述 通过删除仅包含该数据的分区(或多个分区),通常可以轻松地从分区表中删除失去其实用性的数据.相反,在某些情况下,通过添加一个或多个新分区来特别存储该数据,可以极大地促进添加新数据的过程. 由 ...
- mysql 查看 分区_Mysql表分区状态查询
一.查询mysql表是否为分区表:可以查看表具有哪几个分区.分区的方法.分区中数据的记录数等信息 SELECT PARTITION_NAME,PARTITION_METHOD,PARTITION_EX ...
- mysql 安建分区_mysql表分区
范围分区: CREATE TABLE BIGTABLE ( ID INT, SNPTIME DATETIME NOT NULL, VALUE VARCHAR(20), PRIMARY KEY (SNP ...
- mysql explain语句_Mysql explain 语句详解
explain 语句详解 explain 写在 select 前,如下 mysql> explain select * from user_info where id = 2\G ******* ...
- mysql explain 索引_MySql中Explain详解与索引最佳实践
使用EXPLAIN关键字可以模拟优化器执行SQL语句,从而知道MySQL是 如何处理你的SQL语句的.分析你的查询语句或是结构的性能瓶颈 下面是使用 explain 的例子: 在 select 语句之 ...
- 引导mysql执行计划_Mysql执行计划详解
--歌手表 CREATE TABLE`singer` ( `id`int(11) unsigned NOT NULL, `update_time`datetime DEFAULT NULL, `nam ...
最新文章
- iOS OpenCV 图像灰度处理
- 清华大学第四届大数据开放日(Big Data Day)
- 【干货分享】32本优秀的 JavaScript 免费电子书
- python not is函数_python操作符,没有操作符“not in”怎么处理?
- Redis常见面试题及答案模板
- python通过opencv使用图片制作简单视频(亲测)
- POJ 3694 Network ★(边双连通分量+并查集缩点+LCA)
- python计算余弦距离_在Python中计算余弦距离的优化方法
- 美图秀秀首页界面按钮设计(二)
- Altium Designer数码管字体、镂空字体
- 从Zachman企业架构框架想到的
- Wordpress 网站搭建及性能监控方法详解!
- 计算机网络教程网线制作,网线制作方法 图文解析教你学会制作网线【图文教程】...
- 一生要看的50部经典电影
- ADB——连接手机的三种方式
- 使用vs2008制作dll文件,生成动态链接库
- ubuntu多显卡风扇转速控制
- 【好奇心驱动力】ESP8266从零开始折腾记录
- Android5.0,6.0,7.0新特性整理
- Autojs脚本开发实战第一课 基础入门
热门文章
- 190517每日一句
- 扇贝有道180922每日一句
- Atitit java rest mvc微服务原理以及框架选型 目录 第一节 Mvc原理 model controler view	1 第二章 Spark 最简单	1 第一节 Sprbt to
- Atitit 封装的艺术 目录 1.1. 规范是不暴露特有的api	1 1.2. 方便理解,提升可读性	1 1.3. Atitit 提升可读性 数据结构特殊化专用api 比较通用的对象
- AAtitit 项目管理 提升开发效率的项目流程方法模型 哑铃型 橄榄型 直板型titi
- Atitit.软件控件and仪表盘(23)--多媒体子系统--视频输出切换控制cvbs av s-video Ypbpr pal ntsc
- paip.图形化编程工具VS WF与JBPM的比较
- segment fault 至core dump的原因
- 常用数据库的字段类型及大小
- 后疫情时代这家在线教育机构如何乘“云”而上