一.MySql

MySql在5.1以后的版本中加入了分区技术,其不同于以往的分表技术,之前的分表技术是把一张大的表水平(按照一定的逻辑)分成多张表,比如如果我们的User表中有1000万条数据,那如果放在一张表里面去查询,绝对是坑爹的行为,更别提再去进行增删改。如果在加上索引,撑爆内存是难免的。所以才有了之后的分表技术,比如把用户名是a开头的用户放入一张表里面,这样可以减少该表的数据量 ,但是同样这个在应用层上也需要对系统进行优化,比如当我查询“abc”这个用户时,我知道他的信息在user1这个表里,然后与之对应的select语句就要发生相应的变化。当然进行水平分表时也不一定仅仅按照用户名的首字母来匹配对应相应的存储表,应根据信息得不同建立相应的逻辑对应关系。发现自己扯得有点远……。咱们回过头来说一下MySql5.1版本之后的的分区技术,不过还要提一下之前的分表技术,多大表进行拆分后,其相应的子表(暂且这么称呼)在逻辑上是变化的,这就体现在我们查询sql语句的不同上,那有没有一种技术可以在逻辑上保持原状,仅仅在物理结构上发生变化呐?这就是我们要提到的MySql的分区技术。对应用程序而言,他还是一张表,这样可以在逻辑层上屏蔽我们之前遇到的复杂查询语句。

MySql5.1上有5种分区类型,下面就让我们一个个的来瞅瞅看:

1)RANGE分区(经常使用):

基于属于一个给定连续区间的列值,把多个行分配给分区;

例:假定你创建了一个如下表,该表保存了20家音像店的职员记录,这20家音像店的编号从1到20,你想把不同时期离职的职员的信息分别存储,那么你可以将字段separated(即离职时间)作为一个Key,则sql语句如下:

CREATE TABLE Employees(Id INT NOT NULL,Fname VARCHAR(30),Iname VARCHAR(30),Hired DATE NOT NULL DEFAULT ‘1990-01-01’,Separated DATE NOT NULL DEFAULT ‘9999-12-31’,Job_CODE INT,Store_ID INT
)
PARTITION BY RANGE(YEAR(Separated ))(PARTITION S0 VALUESLESS THAN(1991),PARTITION S1 VALUESLESS THAN(1996),PARTITION S2 VALUESLESS THAN(2001),PARTITION S3 VALUESLESS THAN MAXVALUE,
);

PARTITION BYRANGE(YEAR(Separated ))(

……

)

就是根据Separate进行分组,上面代码表示离职年份在1991之前数据的存储在S0表中,其余的一次类推,相信以各位的智商应该能够看得懂

2)LIST分区(一般使用):

类似于RANGE分区,但是属于RANGE的一个特例,是基于列值匹配一个离散集合重的某个值来进行选择的,再清楚一点就是当表中列里的值是固定值时(性别:男,女)而且是枚举类型时,此时适合使用LIST分区;

例:假定你创建了一个如下的一个表,该表保存了20家音像店的职员记录,而这20家音像店分布在4个有经销权的地方,如下表:

地区

商店ID号

北区

3,5,6,9,17

东区

1,2,10,11,19,20

西区

4,12,13,14,18

中心区

7,8,15,16

则LIST分区语句为:

CREATE TABLE Employees(Id INT NOT NULL,Fname VARCHAR(30),Iname VARCHAR(30),Hired DATE NOT NULL DEFAULT ‘1990-01-01’,Separated DATE NOT NULL DEFAULT ‘9999-12-31’,Job_CODE INT,Store_ID INT
)
PARTITION BY LIST(Store_ID)(PARTITION Snorth VALUESLESS IN(3,5,6,9,17),PARTITION Seast VALUESLESS IN(1,2,10,11,19,20),PARTITION Swest VALUESLESS IN(4.12.13.14.18),PARTITION Scentral VALUESLESS IN (7,8.15.16),
);

相信大家都看得懂,不做过多的解释。

3)HASH分区(较少使用)

基于用户定义的表达式的返回值来进行选择的分区,该表达式使用将要插入到表中的那些行的列值进行计算,这个函数可以包含MySql重的有效的、产生非负整数值的任何表达式。其要根据该表所处的环境来衡量是否可用于该表,也就是在预先确定数目的分区中平均分布。

例:还是上面的那种表,那么现在我想把不同时期入职的员工分别进行存储,那我可以将日期字段Hired作为一个Key,sql语句如下:

CREATE TABLE Employees(Id INT NOT NULL,Fname VARCHAR(30),Iname VARCHAR(30),Hired DATE NOT NULL DEFAULT ‘1990-01-01’,Separated DATE NOT NULL DEFAULT ‘9999-12-31’,Job_CODE INT,Store_ID INT
)
PARTITION BY HASH(YEAR(Hired))
PARTITIONS 4
;

也就是说根据Hired这个字段把数据平均分配到4个不同分区表中。注意:HASH中的值必须是整数所以使用到了YEAR函数。

4)KEY分区(很少使用)

类似于HASH分区,区别在于KEY分区只提供计算一列或多列,且MySql服务器提供其自身的哈希函数。与HASH不同的是它的Key可以不是整数类型,可以是字符串等字段,该分区使用不多,而且效率有些折扣,在此不再举例;

二.Sql Server

Sql Server在2005之后的版本引入的特性。这个特性允许逻辑上的表在物理上分成多个部分,之前所谓的分区表仅仅是分布式视图,也就是多个表做union视图,而真正的分区表是逻辑上一个表,物理上多个表,原理跟MySql分区表的概念基本一致。有一点值得注意的是分区函数并不具体属于分区架构和分区表,他们之间仅仅属于使用关系。

1).定义分区表首先要定义分区函数,例如:

--创建分区函数
CREATE PARTITION FUNCTION fqPartition(DATE)
AS RANGE RIGHT
FOR VALUES('2010-01-01','2012-01-01')
--查看分区函数是否创建成功
Select * FROM SYS.PARTITION_FUNCTIONSGAI

该函数把时间分成了3个区域,2010-01-01之前是一个区域,2010-01-01~2012-01-01是一个区域,剩下的是一个区域。

2).定义分区架构

定义完分区函数仅仅是到了如何将列的值区分到不同的分区中,而每个分区的存储方式则需要分区架构来定义,分区架构负责分配每个区属于那个文件组,而分区函数是决定了如何在逻辑上分区

--基于之前的分区函数创建分区架构
CREATE PARTITION SCHEME schemeForPartition
AS PARTITION fqPartition
--因为有3个区域,所以要指定3个文件组,也可以使用all 所有的区域指向一个文件组,不过这样没有太多意义
TO (fileGroup0,fileGroup1,fileGroup2)
--查看已经建立的分区架构
select * from sys.partition_schemes

3).定义分区表

这个就不用过多解释了,就是我们的逻辑表,只不过显示当中都是某张表够大的时候才考虑采用分区表,但是当我们在刚刚建立时需要指定相关的特性,示例代码:

CREATE TABLE PTable(
ID INT,
ORDERID INT,
SALESDATE DATE
) ON schemeForPartition(SALESDATE)
--schemeForPartition指定分区架构根据的Key为SALESDATE就创建完成了

这样Sql Server数据库的分区表就创建完成了。。。

今天先写到这里,以后在对分区表进行深入的研究。

转载于:https://blog.51cto.com/tongling/1244812

MySql,Sql Server分区技术浅析相关推荐

  1. mysql桦仔_Microsoft SQL Server 2005技术内幕:T-SQL查询笔记

    Microsoft SQL Server 2005技术内幕:T-SQL查询笔记 目录 f f f f f f f f 第二章 物理查询处理 分析,代数化,查询优化 f f f f f. 分析--> ...

  2. oracle rds 运维服务_从运维的角度分析使用阿里云数据库RDS的必要性–你不应该在阿里云上使用自建的MySQL/SQL Server/Oracle/PostgreSQL数据库...

    开宗明义,你不应该在阿里云上使用自建的MySQL or SQL Server数据库,对了,还有Oracle or PostgreSQL数据库. 云数据库 RDS(Relational Database ...

  3. VB访问SQL Server数据库技术全揭密

    VB访问SQL Server数据库技术全揭密 2006-08-03 05:00作者:出处:电子技术责任编辑:方舟 摘 要: 本文讨论了Visual Basic应用程序访问SQL Server数据库的几 ...

  4. 聚簇索引与非聚簇索引的区别以及SQL Server查询优化技术

    在<数据库原理>里面,对聚簇索引的解释是:聚簇索引的顺序就是数据的物理存储顺序,而对非聚簇索引的解释是:索引顺序与数据物理排列顺序无关.正式因为如此,所以一个表最多只能有一个聚簇索引. 不 ...

  5. SQL Server数据库技术大全——08讲 PD的使用

    SQL Server数据库技术大全--08讲   PD的使用 讲解了使用PowerDesigner进行数据库建模,包括如何建立概念模型.如何通过概念模型生成物理模型以及如何通过物理模型生成数据库脚本的 ...

  6. sql server 分区_使用分区归档SQL Server数据

    sql server 分区 The Partition feature was introduced in the SQL Server 2005. This article is to cover ...

  7. sql server 分区_SQL Server:锁定设置以用于增强分区功能

    sql server 分区 When talking about performance and scalability inside SQL Server, I don't see anyone m ...

  8. SQL Server数据库技术大全——14讲 执行计划

    SQL Server数据库技术大全--14讲  执行计划 讲解了如何查看统计信息,如何查看执行计划以及如何简单的优惠数据库. [hjp2=500,375,true]http://player.youk ...

  9. 驰网云数据库MySQL SQL Server

    驰网云数据库MySQL &SQL Server 在最近几年,云数据库逐渐成为焦点中的焦点.根据IDC数据显示,到2025年,全球超过50%的数据库将部署在公有云上:在中国市场,这个数据将达70 ...

最新文章

  1. 腾讯天衍实验室夺世界机器人大赛双冠军,新算法突破脑机接口瓶颈
  2. Echange配置企业邮件收发策略
  3. matlab 绘制方格网格(二维)
  4. Windows远程Linux/Ubuntu桌面
  5. 计算机弹奏两只老虎爱跳舞,原神风物之诗琴乐谱大全
  6. 服务器主板用360优化后崩溃,为什么卸载了360以后,电脑反而更流畅了?电脑高手这样解释...
  7. SpringBoot b2b2c 多用户商城系统(八):配置中心服务化和高可用
  8. linux solrcloud zookeeper分布式集群部署
  9. scrapy框架爬虫文件配置
  10. Spring MVC应用程序中的Thymeleaf模板布局,无扩展
  11. 两种实现简单cp的方法
  12. mysql 语句检查_mysql查询语句
  13. 分别用函数和带参的宏,从三个数中找出最大的数。
  14. matlab中m文件与m函数的学习与理解
  15. boost文件锁的使用
  16. jdbc连接数据库mysql视频_jdbc连接数据库mysql视频
  17. eclipse 设置Java快捷键补全
  18. Silverlight 下载
  19. Android 截屏监听分享
  20. gift to me by myself on 2012's new year

热门文章

  1. iPhone5帮助了谁?
  2. Java基础7:关于Java类和包的那些事
  3. php面试题11(边看边复习刚刚讲的)(array_multisort($arr1,$arr2); 用$arr1来排序$arr2。)...
  4. Python爬虫(十三)_案例:使用XPath的爬虫
  5. Oracle数据库创建表空间及用户授权
  6. mvc EF 从数据库更新实体,添加视图实体时添加不上的问题
  7. 学习网站分享 - 菜鸟教程
  8. jQuery 2.0.3 源码分析Sizzle引擎 - 解析原理
  9. Foundation框架中常用类的介绍
  10. C语言2011计算机二级c语言考点:c语言的基础知识