首页 数据库 mysql教程 MySQL的表分区

MySQL的表分区

Jun 07, 2016 pm 04:41 PM
mysql 什么 分区

一、什么是表分区 通俗地讲表分区是将一大表,根据条件分割成若干个小表。 mysql 5.1开始支持 数据 表分区了。 如:某用户表的记录超过了600万条,那么就可以根据入库日期将表分区,也可以根据所在地将表分区。当然也可根据其他的条件分区。 二、为什么要对

一、什么是表分区
通俗地讲表分区是将一大表,根据条件分割成若干个小表。mysql5.1开始支持数据表分区了。
如:某用户表的记录超过了600万条,那么就可以根据入库日期将表分区,也可以根据所在地将表分区。当然也可根据其他的条件分区。

二、为什么要对表进行分区
为了改善大型表以及具有各种访问模式的表的可伸缩性,可管理性和提高数据库效率。

分区的一些优点包括:
1)、与单个磁盘或文件系统分区相比,可以存储更多的数据。
2)、对于那些已经失去保存意义的数据,通常可以通过删除与那些数据有关的分区,很容易地删除那些数据。相反地,在某些情况下,添加新数据的过程又可以通过为那些新数据专门增加一个新的分区,来很方便地实现。通常和分区有关的其他优点包括下面列出的这些。MySQL分区中的这些功能目前还没有实现,但是在我们的优先级列表中,具有高的优先级;我们希望在5.1的生产版本中,能包括这些功能。
3)、一些查询可以得到极大的优化,这主要是借助于满足一个给定WHERE语句的数据可以只保存在一个或多个分区内,这样在查找时就不用查找其他剩余的分区。因为分区可以在创建了分区表后进行修改,所以在第一次配置分区方案时还不曾这么做时,可以重新组织数据,来提高那些常用查询的效率。
4)、涉及到例如SUM()和COUNT()这样聚合函数的查询,可以很容易地进行并行处理。这种查询的一个简单例子如 “SELECT salesperson_id, COUNT (orders) as order_total FROM sales GROUP BY salesperson_id;”。通过“并行”,这意味着该查询可以在每个分区上同时进行,最终结果只需通过总计所有分区得到的结果。
5)、通过跨多个磁盘来分散数据查询,来获得更大的查询吞吐量。
三、分区类型

· RANGE分区:基于属于一个给定连续区间的列值,把多行分配给分区。
· LIST分区:类似于按RANGE分区,区别在于LIST分区是基于列值匹配一个离散值集合中的某个值来进行选择。
· HASH分区:基于用户定义的表达式的返回值来进行选择的分区,该表达式使用将要插入到表中的这些行的列值进行计算。这个函数可以包含MySQL 中有效的、产生非负整数值的任何表达式。
· KEY分区:类似于按HASH分区,区别在于KEY分区只支持计算一列或多列,且MySQL 服务器提供其自身的哈希函数。必须有一列或多列包含整数值。

  • RANGE分区

基于属于一个给定连续区间的列值,把多行分配给分区。

这些区间要连续且不能相互重叠,使用VALUES LESS THAN操作符来进行定义。以下是实例。

Sql代码 ?MySQL的表分区

  1. 创建?员工?(
  2. ???id?INT?NOT?NULL,
  3. ???fname?VARCHAR(30),
  4. ???lname?VARCHAR(30),
  5. ???已雇用?日期不是NULL默认'1970-01-01 ',
  6. ???分开?日期NOTNULL默认'9999-12-31 ',
  7. ???职位代码?INT?NOT?NULL,
  8. ???store_id?INT?NOT?NULL
  9. )
  10. 分区?BY?范围?(store_id)?(
  11. ???分区?p0??小于?大于?(6),
  12. ???分区?p1??小于?大于?(11),
  13. ???分区?p2??小于?大于?(16),
  14. ???分区?p3??小于?大于?(21)
  15. );

按照这种分区方案,在商店1到5工作的员工相对应的所有行被保存在分区P0中,商店6到10的员工保存在P1中,依次类推。注意,每个分区都是分区按顺序进行定义,从最低到最高。这是 PARTITION BY RANGE 语法的要求;在这一点上,它类似于 C 或 Java 中的“switch … case”语句。
对于包含数据(72, 'Michael', 'Widenius', '1998-06-25', NULL, 13)的一个新行,可以很容易地确定会插入到p2分区中,但是如果增加了一个编号对于第21个的商店,将会上线吗?在这种方案下,由于没有规则把store_id大于20的商店包含在内,服务器将不知道将该行保存在哪里,将会导致错误。要避免出现这种错误,可以通过在 CREATE TABLE 语句中使用一个“包罗万象”的 VALUES LESS THAN 子句,该子句提供给所有大于显式指定的最高值的值:

Sql代码?MySQL的表分区

  1. 创建?员工?(
  2. ???id?INT?NOT?NULL,
  3. ???fname?VARCHAR(30),
  4. ???lname?VARCHAR(30),
  5. ???已雇用?日期不是NULL默认'1970-01-01 ',
  6. ???分开?日期NOTNULL默认'9999-12-31 ',
  7. ???职位代码?INT?NOT?NULL,
  8. ???store_id?INT?NOT?NULL
  9. )
  10. 分区??范围?(store_id)?(
  11. ???分区?p0??小于?大于?(6),
  12. ???分区?p1??小于?大于?(11),
  13. ???分区?p2??小于?大于?(16),
  14. ???分区?p3??小于?小于?MAXVALUE
  15. );

MAXVALUE 表示最大的可能的整数值。现在,store_id 列值大于或等于 16(定义了的最高值)的所有行都将保存在分区 p3 中。在未来的某个时候,当存储数已经增长到25, 30, 或更多 ,可以使用ALTER TABLE语句为商店21-25, 26-30等增加新的分区。
在几乎相同的结构中,你还可以基于员工的工作代码来分割表,以此,基于job_code列值的连续区间。例如——假设2位数字的工作代码用来表示普通(店内的)工人,三个数字代码表示办公室和支持人员,四个数字代码表示仓库,你可以使用下面的语句该创建分区表:

Sql代码?MySQL的表分区

  1. 创建?员工?(
  2. ???id?INT?NOT?NULL,
  3. ???fname?VARCHAR(30),
  4. ???lname?VARCHAR(30),
  5. ???已雇用?日期不是NULL默认'1970-01-01 ',
  6. ???分开?日期NOTNULL默认'9999-12-31 ',
  7. ???职位代码?INT?NOT?NULL,
  8. ???store_id?INT?NOT?NULL
  9. )
  10. 分区??范围?(工作代码)?(
  11. ???分区?p0??小于?大于?(100),
  12. ???分区?p1??小于?大于?(1000),
  13. ???分区?p2??小于?大于?(10000)
  14. );

在这个例子中,店内工人相关的所有行将保存在分区p0中,办公室和支持人员相关的所有行保存在分区p1中,仓库相关的所有行保存在分区p2中。
在 VALUES LESS THAN 子句中使用表达式也是可能的。这里最重要的限制是 MySQL 必须能够计算表达式的返回值作为 LESS THAN ( 除了可以根据仓库编号分割表数据之外,你还可以使用一个基于两个DATE(日期)中的一个表达式来分割表数据。例如,假设你想基于每个员工离开公司的年份来分割表,也就是说,YEAR(separated)的值。实现这种分区模式的CREATE TABLE语句的一个例子如下所示:

Sql代码?MySQL的表分区

  1. 创建?员工?(
  2. ???id?INT?NOT?NULL,
  3. ???fname?VARCHAR(30),
  4. ???lname?VARCHAR(30),
  5. ???已雇用?日期不是NULL默认'1970-01-01 ',
  6. ???分开?日期NOTNULL默认'9999-12-31 ',
  7. ???工作代码?INT,
  8. ???store_id?INT
  9. )
  10. 分区??范围?(年份(分隔))?(
  11. ???分区?p0??小于?大于?(1991),
  12. ???分区?p1??小于?比?(1996),
  13. ???分区?p2??小于?比?(2001),
  14. ???分区?p3??小于?小于?MAXVALUE
  15. );

在本方案中,在1991年前雇佣的所有员工的记录保存在分区p0中,1991年到1995年期间雇佣的所有员工的记录保存在分区p1中,1996年到2000年期间雇佣的所有职工的信息保存在分区p2中,2000年后雇佣的所有职工的信息保存在p3中。

RANGE分区在如下场合特别有用:
1)、 当需要删除一个分区上的“旧的”数据时,只删除分区即可。如果你使用上面最近的那个例子给出的分区方案,你只需简单地使用 “ALTER TABLE employees DROP PARTITION p0;”来删除所有在1991年前就已经停止工作的雇员相对应的所有行。对于有大量行的表,这比运行一个如“DELETE FROM employees WHERE YEAR (separated) 2)、想要使用一个包含有日期或时间值,或包含有从一些其他级数开始增长的值的列。
3)、经常运行直接依赖于用于分割表的列的查询。例如,当执行一个如“SELECT COUNT(*) FROM employees WHERE YEAR(separated) = 2000 GROUP BY store_id;”这样的查询时,MySQL可以很迅速地确定只有分区p2需要扫描,这是因为余下的分区不可能包含有符合该WHERE子句的任何记录。

注释:这种优化还没有在MySQL 5.1源程序中启用,但是,有关工作正在进行中。

  • LIST分区

类似于按RANGE分区,区别在于LIST分区是基于列值匹配一个离散值集合中的某个值来进行选择。

LIST分区通过使用“PARTITION BY LIST(expr)”来实现,其中“expr” 是某列值或一个基于某个列值、并返回一个整数值的表达式,然后通过“VALUES IN (value_list)”的方式来定义每个分区,其中“value_list”是一个通过逗号分隔的整数列表。
注释:在MySQL 5.1中,当使用LIST分区时,有可能只能匹配整数列表。

Sql代码 ?MySQL的表分区

  1. CREATE?TABLE?employees?(
  2. ????id?INT?NOT?NULL,
  3. ????fname?VARCHAR(30),
  4. ????lname?VARCHAR(30),
  5. ????hired?DATE?NOT?NULL?DEFAULT?‘1970-01-01′,
  6. ????separated?DATE?NOT?NULL?DEFAULT?‘9999-12-31′,
  7. ????job_code?INT,
  8. ????store_id?INT
  9. );

假定有20个音像店,分布在4个有经销权的地区,如下表所示:

====================
地区????? 商店ID 号

————————————

北区????? 3, 5, 6, 9, 17
东区????? 1, 2, 10, 11, 19, 20
西区????? 4, 12, 13, 14, 18
中心区?? 7, 8, 15, 16

====================
要按照属于同一个地区商店的行保存在同一个分区中的方式来分割表,可以使用下面的“CREATE TABLE”语句:

Sql代码 ?MySQL的表分区

  1. 创建?员工?(
  2. ???id?INT?NOT?NULL,
  3. ???fname?VARCHAR(30),
  4. ???lname?VARCHAR(30),
  5. ???已雇用?日期不是NULL默认'1970-01-01 ',
  6. ???分开?日期NOTNULL默认'9999-12-31 ',
  7. ???工作代码?INT,
  8. ???store_id?INT
  9. )
  10. 分区?BY?列表(store_id)
  11. ????分区?pNorth??IN?(3,5,6,9,17),
  12. ????分区?pEast??IN?(1,2,10,11,19,20),
  13. ????分区?pWest??IN?(4,12,13,14,18),
  14. ???分区?pCentral?IN?(7,8,15,16)
  15. );

这使得在表中增加或删除指定地区的员工记录容易起来。例如,假设西区的所有音像店都卖给了其他公司。那么与在西区音像店工作员工相关的所有记录(行) )可以使用查询“ALTER TABLE员工DROP PARTITION pWest;”来进行删除,它与具有同样作用的DELETE(删除)查询“DELETE query DELETE FROM员工WHERE store_id IN (4,12,13,14,18);”比起来,要有效剃除。
【要点】:如果尝试插入列值(或分区表达式的返回值)不在分区值列表中的一行时,那么“INSERT”查询将失败并报错。例如,假设LIST分区的采用上面的方案,下面的方案查询将失败:

Sql代码?MySQL的表分区

  1. 插入?进入?员工?价值观(224,?'Linus',?'Torvalds',?'2002-05-01′,?'2004-10-12′,?42,?21);

这是因为“store_id”列值21不能在用于定义分区pNorth、pEast、pWest、或pCentral的值列表中找到。要重点注意的是,LIST没有类似的“VALUES LESS THAN MAXVALUE”这样包含的其他值内置的定义。要匹配的任何值都必须在值列表中找到。
LIST分区除了能和RANGE分区结合起来生成一个复合的子分区,与HASH和KEY分区结合起来生成复合的子分区也是可能的。

  • HASH分区

根据用户定义的表达式的返回值来进行选择的分区,该表达式使用将要插入到表中的这些行的列值进行计算。该函数可以包含MySQL中有效的、产生非负整数值的任何表达。

要使用HASH分区来分割一个表,要在CREATE TABLE语句上添加一个“PARTITION BY HASH (expr)”子句,其中“expr”是一个返回一个整数的表达式。它可以与字段类型为MySQL整型的一列的名称。另外,你很可能需要在后面再添加一个“PARTITIONS num”子句,其中num是一个非负的整数,它表示表将要被分割成分区的数量。

Sql代码?MySQL的表分区

  1. CREATE?TABLE?employees?(
  2. ????id?INT?NOT?NULL,
  3. ????fname?VARCHAR(30),
  4. ????lname?VARCHAR(30),
  5. ????hired?DATE?NOT?NULL?DEFAULT?‘1970-01-01′,
  6. ????separated?DATE?NOT?NULL?DEFAULT?‘9999-12-31′,
  7. ????job_code?INT,
  8. ????store_id?INT
  9. )
  10. PARTITION?BY?HASH(store_id)
  11. PARTITIONS?4;

如果没有包括一个PARTITIONS子句,那么分区的数量将默认为1。 例外: 对于NDB Cluster(簇)表,默认的分区数量将与簇数据节点的数量相同,

这种修正可能是考虑任何MAX_ROWS 设置,以便确保所有的行都能合适地插入到分区中。

  • LINER HASH

MySQL还支持线性哈希功能,它与常规哈希的区别在于,线性哈希功能使用的一个线性的2的幂(powers-of-two)运算法则,而常规 哈希使用的是求哈希函数值的模数。
线性哈希分区和常规哈希分区在语法上的唯一区别在于,在“PARTITION BY” 子句中添加“LINEAR”关键字。

Sql代码 ?MySQL的表分区

  1. CREATE?TABLE?employees?(
  2. ????id?INT?NOT?NULL,
  3. ????fname?VARCHAR(30),
  4. ????lname?VARCHAR(30),
  5. ????hired?DATE?NOT?NULL?DEFAULT?‘1970-01-01′,
  6. ????separated?DATE?NOT?NULL?DEFAULT?‘9999-12-31′,
  7. ????job_code?INT,
  8. ????store_id?INT
  9. )
  10. PARTITION?BY?LINEAR?HASH(YEAR(hired))
  11. PARTITIONS?4;

假设一个表达式expr, 当使用线性哈希功能时,记录将要保存到的分区是num 个分区中的分区N,其中N是根据下面的算法得到:
1.??? 找到下一个大于num.的、2的幂,我们把这个值称为V ,它可以通过下面的公式得到:
2.??? V = POWER(2, CEILING(LOG(2, num)))
(例如,假定num是13。那么LOG(2,13)就是3.7004397181411。 CEILING(3.7004397181411)就是4,则V = POWER(2,4), 即等于16)。
3.??? 设置 N = F(column_list) & (V – 1).
4.??? 当 N >= num:
·???????? 设置 V = CEIL(V / 2)
·???????? 设置 N = N & (V – 1)
例如,假设表t1,使用线性哈希分区且有4个分区,是通过下面的语句创建的:
CREATE TABLE t1 (col1 INT, col2 CHAR(5), col3 DATE)
PARTITION BY LINEAR HASH( YEAR(col3) )
PARTITIONS 6;
现在假设要插入两行记录到表t1中,其中一条记录col3列值为’2003-04-14’,另一条记录col3列值为’1998-10-19’。第一条记录将要保存到的分区确定如下:
V = POWER(2, CEILING(LOG(2,7))) = 8
N = YEAR(‘2003-04-14′) & (8 – 1)
= 2003 & 7
= 3
(3 >= 6 为假(FALSE): 记录将被保存到#3号分区中)
第二条记录将要保存到的分区序号计算如下:
V = 8
N = YEAR(‘1998-10-19′) & (8-1)
= 1998 & 7
= 6
(6 >= 4 为真(TRUE): 还需要附加的步骤)
N = 6 & CEILING(5 / 2)
= 6 & 3
= 2

(2 >= 4 为假(FALSE): 记录将被保存到#2分区中)
按照线性哈希分区的优点在于增加、删除、合并和拆分分区将变得更加快捷,有利于处理含有极其大量(1000吉)数据的表。它的缺点在于,与使用

常规HASH分区得到的数据分布相比,各个分区间数据的分布不大可能均衡。

  • KSY分区

类似于按HASH分区,区别在于KEY分区只支持计算一列或多列,且MySQL 服务器提供其自身的哈希函数。必须有一列或多列包含整数值。

Sql代码 ?MySQL的表分区

  1. CREATE?TABLE?tk?(
  2. ????col1?INT?NOT?NULL,
  3. ????col2?CHAR(5),
  4. ????col3?DATE
  5. )
  6. PARTITION?BY?LINEAR?KEY?(col1)
  7. PARTITIONS?3;

在KEY分区中使用关键字LINEAR和在HASH分区中使用具有同样的作用,分区的编号是通过2的幂(powers-of-two)算法得到,而不是通过模数算法。

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳图形设置
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您听不到任何人,如何修复音频
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.聊天命令以及如何使用它们
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

mysql:简单的概念,用于轻松学习 mysql:简单的概念,用于轻松学习 Apr 10, 2025 am 09:29 AM

MySQL是一个开源的关系型数据库管理系统。1)创建数据库和表:使用CREATEDATABASE和CREATETABLE命令。2)基本操作:INSERT、UPDATE、DELETE和SELECT。3)高级操作:JOIN、子查询和事务处理。4)调试技巧:检查语法、数据类型和权限。5)优化建议:使用索引、避免SELECT*和使用事务。

phpmyadmin怎么打开 phpmyadmin怎么打开 Apr 10, 2025 pm 10:51 PM

可以通过以下步骤打开 phpMyAdmin:1. 登录网站控制面板;2. 找到并点击 phpMyAdmin 图标;3. 输入 MySQL 凭据;4. 点击 "登录"。

navicat premium怎么创建 navicat premium怎么创建 Apr 09, 2025 am 07:09 AM

使用 Navicat Premium 创建数据库:连接到数据库服务器并输入连接参数。右键单击服务器并选择“创建数据库”。输入新数据库的名称和指定字符集和排序规则。连接到新数据库并在“对象浏览器”中创建表。右键单击表并选择“插入数据”来插入数据。

MySQL:世界上最受欢迎的数据库的简介 MySQL:世界上最受欢迎的数据库的简介 Apr 12, 2025 am 12:18 AM

MySQL是一种开源的关系型数据库管理系统,主要用于快速、可靠地存储和检索数据。其工作原理包括客户端请求、查询解析、执行查询和返回结果。使用示例包括创建表、插入和查询数据,以及高级功能如JOIN操作。常见错误涉及SQL语法、数据类型和权限问题,优化建议包括使用索引、优化查询和分表分区。

为什么要使用mysql?利益和优势 为什么要使用mysql?利益和优势 Apr 12, 2025 am 12:17 AM

选择MySQL的原因是其性能、可靠性、易用性和社区支持。1.MySQL提供高效的数据存储和检索功能,支持多种数据类型和高级查询操作。2.采用客户端-服务器架构和多种存储引擎,支持事务和查询优化。3.易于使用,支持多种操作系统和编程语言。4.拥有强大的社区支持,提供丰富的资源和解决方案。

navicat怎么新建连接mysql navicat怎么新建连接mysql Apr 09, 2025 am 07:21 AM

可在 Navicat 中通过以下步骤新建 MySQL 连接:打开应用程序并选择“新建连接”(Ctrl N)。选择“MySQL”作为连接类型。输入主机名/IP 地址、端口、用户名和密码。(可选)配置高级选项。保存连接并输入连接名称。

redis怎么使用单线程 redis怎么使用单线程 Apr 10, 2025 pm 07:12 PM

Redis 使用单线程架构,以提供高性能、简单性和一致性。它利用 I/O 多路复用、事件循环、非阻塞 I/O 和共享内存来提高并发性,但同时存在并发性受限、单点故障和不适合写密集型工作负载的局限性。

MySQL和SQL:开发人员的基本技能 MySQL和SQL:开发人员的基本技能 Apr 10, 2025 am 09:30 AM

MySQL和SQL是开发者必备技能。1.MySQL是开源的关系型数据库管理系统,SQL是用于管理和操作数据库的标准语言。2.MySQL通过高效的数据存储和检索功能支持多种存储引擎,SQL通过简单语句完成复杂数据操作。3.使用示例包括基本查询和高级查询,如按条件过滤和排序。4.常见错误包括语法错误和性能问题,可通过检查SQL语句和使用EXPLAIN命令优化。5.性能优化技巧包括使用索引、避免全表扫描、优化JOIN操作和提升代码可读性。

See all articles