MySQL Partition 相关使用总结
目录
一、Range分区
二、List分区
三、Hash分区
四、Key分区
五、子分区
六、分区常用操作
概述
概念：分区可以根据规则在文件系统中分散存储各个表的部分。实际上，表的不同部分作为单独的表存储在不同的位置。如下图所示：其中p代表分区，sp代表子分区。
优点：
1.分区使一张表中存储的数据比单个磁盘或文件系统分区上存储的数据更多。
2.通过删除仅包含该数据的分区（或多个分区），可以轻松地从分区表中删除数据。相反，通过添加一个或多个新分区更方便存储数据。
3.某些查询可以极大地优化，因为满足给定WHERE子句的数据只能存储在一个或多个分区上，这会自动从搜索中排除其他的分区。
一、Range分区
Range分区是按连续不重叠的范围划分的，并使用VALUES LESS THAN运算符定义 。区间为左闭右开。
1. Range分区
|
|
也可以使用函数表达式对表进行分区
|
|
当以下一个或多个条件成立时，范围分区特别有用：
（1）想要按时间删除数据。
（2）想要使用包含日期或区间值的列。
（3）经常运行直接对表进行分区的列的查询。例如，在执行EXPLAIN SELECT COUNT(*) FROM employees WHERE separated BETWEEN '2000-01-01' AND '2000-12-31' GROUP BY store_id;查询时 ，MySQL 可以快速确定只需要扫描p2分区。
2. 多列Range分区
RANGE COLUMNS分区RANGE在以下方面与分区有一些不同：
(1)RANGE COLUMNS 不接受表达式，只接受列名。
(2)RANGE COLUMNS 接受一列或多列的列表。
(3)RANGE COLUMNS分区基于 元组（列值列表）之间的比较，而不是标量值之间的比较。RANGE COLUMNS分区中行的放置也是基于元组之间的比较；
(4)RANGE COLUMNS分区列不限于整数列；字符串、DATE、DATETIME列也可以作为分区列。
例如:
|
|
插入时比较的是元组（列表）
mysql> INSERT INTO rc1 VALUES (5,10), (5,11), (5,12);
查看表partition分布：
SELECT PARTITION_NAME,TABLE_ROWS FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_NAME = 'r1';
+--------------+----------------+------------+
| TABLE_SCHEMA | PARTITION_NAME | TABLE_ROWS |
+--------------+----------------+------------+
| p | p0 | 2 |
| p | p1 | 1 |
+--------------+----------------+------------+
可以通过使用mysql客户端比较元组和分区定义的大小
mysql> SELECT (5,10) < (5,12), (5,11) < (5,12), (5,12) < (5,12);
+-----------------+-----------------+-----------------+
| (5,10) < (5,12) | (5,11) < (5,12) | (5,12) < (5,12) |
+-----------------+-----------------+-----------------+
| 1 | 1 | 0 |
+-----------------+-----------------+-----------------+
也可以使用非整数列作为分区列
|
|
|
|
二、List分区
在列表分区中，每个分区是根据一组值列表定义和选择的。
1. List分区
|
|
删除一个partition的数据：
|
|
这比DELETE FROM employees WHERE store_id IN (4,12,13,14,18);语句执行效率高得多
插入数据：
mysql> INSERT INTO h2 VALUES (3, 5);
ERROR 1525 (HY000): Table has no partition for value 3
若INSERT包含不匹配的分区列值的语句失败并显示错误。
可以使用IGNORE关键字来忽略此类错误
mysql> INSERT IGNORE INTO h2 VALUES (2, 5), (6, 10), (7, 5), (3, 1), (1, 9);
Query OK, 3 rows affected (0.00 sec)
Records: 5 Duplicates: 2 Warnings: 0
2.List多列分区
LIST分区的一种拓展，它允许使用多个列作为分区键，并支持字符串类型、DATE、DATETIME列用作分区列。（经测试不支持默认值DEFAULT，默认大小写不敏感)。
|
|
与RANGE COLUMNS分区一样，可以在COLUMNS()子句中使用多个列
|
|
三、Hash分区
1.Hash分区
按Hash分区主要用于确保数据在分区之间均匀分布。
对store_id列使用Hash分为4个分区
CREATE TABLE employees (
id INT NOT NULL,
fname VARCHAR(30),
lname VARCHAR(30),
hired DATE NOT NULL DEFAULT '1970-01-01',
separated DATE NOT NULL DEFAULT '9999-12-31',
job_code INT,
store_id INT
)
PARTITION BY HASH(store_id)
PARTITIONS 4;
|
|
还可以使用返回整数的SQL表达式
|
|
当使用PARTITION BY HASH时，存储引擎使用基于表达式结果的模确定目标分区。
N = MOD(expr, num).
如要插入 hired 的 值为 '2005-09-15'时 他的目标分区为:
MOD(YEAR('2005-09-01'),4)
= MOD(2005,4)
= 1
2. 线性hash分区
它与常规散列的不同之处在于，线性散列使用线性二次幂算法，而常规散列使用散列函数值的模数。
|
|
计算方法：
(1) V = POWER(2, CEILING(LOG(2, num)))
其中num为分区个数，假设num是 13。那么 LOG(2,13)是 3.7004397181411。 CEILING(3.7004397181411)是 4，而V= POWER(2,4)是 16。
(2) N = F(column_list) & (V - 1)
(3) 若 N >= num 则V = V / 2 ; N = N & (V - 1) 重复执行第(2)步
假设t1使用线性哈希分区并具有6个分区
CREATE TABLE t1 (col1 INT, col2 CHAR(5), col3 DATE)
PARTITION BY LINEAR HASH( YEAR(col3) )
PARTITIONS 6;
插入一条数据，其中col3值为 '2003-04-14'
V = POWER(2, CEILING( LOG(2,6) )) = 8
N = YEAR('2003-04-14') & (8 - 1)
= 2003 & 7
= 3
(3 >= 6 is FALSE: record stored in partition #3)
通过线性散列进行分区的优势在于，分区的添加、删除、合并和拆分速度更快，这在处理包含大量（TB）数据的表时非常有用。
缺点是与使用常规散列分区获得的分布相比，数据不太可能在分区之间均匀分布。
四、Key分区
Key分区类似于Hash分区，不同之处在于Hash分区使用用户定义的表达式，Key分区的哈希函数由 MySQL 服务器提供。
Key分区语法规则类似于Hash分区。主要区别为：
KEY只接受零个或多个列名的列表。任何用作分区键的列都必须包含表的部分或全部主键（如果表有主键）。如果没有指定列名作为分区键，则使用表的主键（如果有）。
|
|
如果没有主键但有唯一键，则使用唯一键作为分区键：
|
|
在这两种情况下，分区键就是 id列。
与其他分区类型的情况不同，用于Key分区的列不限于整数或NULL值，例如，以下CREATE TABLE语句是有效的
|
|
也可以通过线性键对表进行分区
|
|
分区编号是使用二的幂算法得出的。
五、子分区
子分区（也称为 复合分区）是对分区表中每个分区的进一步划分。
|
|
表ts有3个RANGE分区。每个分区的p0，p1和p2进一步分成2个hash子分区。实际上，整个表被划分为3 * 2 = 6分区。
还可以对RANGE分区的表进行List子分区。
还可以使用SUBPARTITION子句明确定义子分区， 以指定各个子分区的选项。例如，
|
|
注意：
（1）每个分区必须具有相同数量的子分区。
（2）如果SUBPARTITION在分区表的任何分区上显式定义任何子分区 ，则所有的分区的子分区都需要显示定义。换句话说，以下语句失败：
|
|
（3）每个SUBPARTITION子句必须（至少）包括子分区的名称。
（4）子分区名称在整个表中必须是唯一的。
六、分区常用操作
1. 查看表是否为分区表: SHOW TABLE STATUS WHERE Name='trb3' and Create_options = "partitioned";
2. 查看表分区信息：SELECT * FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_NAME='trb3' AND TABLE_SCHEMA='test'\G;
（1）查看表partition分布：SELECT PARTITION_NAME,TABLE_ROWS FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_NAME = 'r1';
对于分区InnoDB表，列中给出的行数TABLE_ROWS 只是 SQL 优化中使用的估计值。
（2）查看表分区列：SELECT * FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_NAME='trb3' AND TABLE_SCHEMA='kuntools';
3. 查看对表的操作涉及了哪些分区：EXPLAIN SELECT * FROM trb3;
4. 查看分区中储存的行：SELECT * FROM employees PARTITION (p1);
从多个分区获取行，以逗号分隔列表的形式提供它们的名称。SELECT * FROM employees PARTITION (p1, p2);
可以使用 WHERE条件ORDER BY 和LIMIT选项等。还可以使用带有HAVING和 GROUP BY选项的聚合函数。
SELECT/DELETE/INSERT/REPLACE/UPDATE/LOAD DATA/LOAD XML 均支持显式分区选择。
以上内容摘录翻译于mysql官方文档MySQL :: MySQL 8.0 Reference Manual :: 24 Partitioning
MySQL Partition 相关使用总结相关推荐
- boost::mpl模块实现partition相关的测试程序
boost::mpl模块实现partition相关的测试程序 实现功能 C++实现代码 实现功能 boost::mpl模块实现partition相关的测试程序 C++实现代码 #include < ...
- Mysql数据库（四）——mysql索引相关知识
Mysql数据库(四)--mysql索引相关知识 一.索引的概念 二.索引的优缺点 1.优点 2.缺点 三.创建索引的原则 四.索引的分类和创建方法 1.普通索引 ①.直接创建索引 ②.修改表方式创建 ...
- mysql子查询sysdate_Oracle向MySQL 迁移相关事项
Oracle向MySQL 迁移相关事项 从Oracle移植到MySQL主要有六个方面的内容需要移植,一是表Table,包括表结构和数据,二是触发器Trigger,三是存储过程Procedure,函数f ...
- mysql内部时区_一文解决MySQL时区相关问题
前言: 在使用MySQL的过程中,你可能会遇到时区相关问题,比如说时间显示错误.时区不是东八区.程序取得的时间和数据库存储的时间不一致等等问题.其实,这些问题都与数据库时区设置有关,本篇文章将从数据库 ...
- mysql权限相关操作
默认帐号存储位置 位于mysql数据库中 位于user表 创建mysql帐号 需要登陆mysql 使用超级管理员登陆 只有超级管理员才有权限添加帐号 C:\Users\Administrator> ...
- mysql数据库相关
本文记录下mysql数据相关的核心知识点,主要包括索引,事务,锁,并发控制和sql优化等.后续会持续更新. 文章目录 锁和并发控制 索引相关 事务相关 sql相关 其他部分 面试题 锁和并发控制 记录 ...
- 零基础带你学习MySQL—字符串相关的函数（十三）
零基础带你学习MySQL-字符串相关的函数(十三) 一.CHARSET (str)返回子串字符集 二.CONCAT连接子串,将多个列拼接成一列 三.INSTR(string,substring)返回s ...
- mysql数据库相关操作
1.进入mysql/bin目录下输入mysqladmin processlist; 2.启动mysql,输入show processlist; 如果有 SUPER 权限,则可以看到全部的线程,否则,只 ...
- MySQL索引相关知识整理学习
MySQL索引相关知识整理学习 前言 一.MySQL索引 哈希索引 B+树索引 B+树的优点 聚簇索引 非聚簇索引 聚簇索引和非聚簇索引的特点及区别: 二.特殊类型的索引 1.覆盖索引 2.联合索引 ...
最新文章
- pythonturtle画房子_用python的turtle模块实现给女票画个小心心
- H5应用缓存和浏览器缓存有什么区别
- 生产者与消费者（二）---await与 signal
- TensorFlow的各种应用，你晓得不？
- matlab 画三维花瓶,精美花瓶建模教程
- 测试管理工具实践（小组作业）
- xshell7，xftp7个人免费版官方下载，无需破解，免激活，下载即可使用
- 数字电路逻辑关系式化简（代数运算）
- 融合多源信息的知识表示学习方法
- linux开机启动项怎么设置bios,bios怎么设置开机启动项
- Leetcode P640
- 艾永亮：酒瓶中的战争，谁是下一瓶被拿起的葡萄酒
- Ubuntu Linux虚拟机不识别U盘问题解决
- MySQL基础学习（三）————SQL语句的常用操作
- 基于开源软件构建高性能集群NAS系统
- 山东艾思软件科技有限公司-公司介绍
- 分数加减乘除混合运算带答案_100道题，分数加减法混合运算，要答案
- USB音频芯片/TYPE-C音视频处理芯片方案选型表
- 2021年电工（技师）最新解析及电工（技师）复审考试
- MediaPlayer提示“无法播放视频”