【MYSQL】 分区表

对于MYSQL的态度一直都是会基本SQL和简单命令就行,最近处理一个数据量很大的项目,为了提高效率,在数据库方面的瓶颈上,选择了使用分区表来提高查询效率。至此和大家一起分享一下。

1.引言

本文初略的讲述了mysql数据库如何分区表。

2.环境要求

在5.1版本中不是默认就安装了,而在之后版本中一般默认选择了安装分区表支持。可以通过如下方式查看当前数据库是否支持分区表操作:

使用show variables like ‘%partition%‘;如果不支持分区,那么value字段值为No。

3.重要概念描述

3.1 分区字段

1)当仅存在单一主键时,不存在唯一键,那么分区字段必须是主键字段;

2)当存在复合主键时,不存在唯一键,那么分区字段必须是主键组合的一部分字段,一个或多个。

3)当主键和唯一键都存在时,那么分区字段必须同时包括主键字段和唯一键字段。

4.分区表类型

4.1 range分区

1)语法展示:

# 语法
# 在创建表单的最后,添加partitions by range(分区字段)(
#   partition 分区名 values less than(阀值1),
#   partition 分区名 values less than(阀值2),
#   ...
#   partition 分区名 values less than(阀值n),
# )

示例展示:

create table test_range(
	id int auto_increment,
	description varchar(50),
	primary key(id)
) ENGINE=InnoDB auto_increment=1 default charset=utf8
partition by range(id)(
	partition p1 values less than(6), #id<6的存放在p1分区
	partition p2 values less than(11) #6 <= id < 11 存放在p2分区
);

查看分区情况:

   show create table test_range;

注意到,在显示的表结构添加了分区表的信息。

数据测试:

    insert into test_range values(null, "test1");    
    insert into test_range values(null, "test2");
    insert into test_range values(null, "test3");
    insert into test_range values(null, "test4");
    insert into test_range values(null, "test5");
    insert into test_range values(null, "test6");
    insert into test_range values(null, "test7");
    insert into test_range values(null, "test8");
    insert into test_range values(null, "test9");
    insert into test_range values(null, "test10");

插入10条数据,此时我们来查看其查询执行过程:

从结果可以发现,其只是在p1分区执行的查询,那么此时就减少了查询扫描的数据量,从而提高了查询效率。

如果此时,我们插入第11条数据会发生什么情况呢?

   insert into test_range values(null, "test11");
   会发错:insert into test_range values(null, "test11")	Error Code: 1526. Table has no partition for value 11	0.015 sec

原因很简单,因为在我们创建表单时,仅仅指定了1 - 10的id数值分区,当插入id=11时的分区时,此时没有分区提供,那么就引发错误,那么如果解决这样的问题呢,采取如下方式,修改表的分区方式:

alter table test_range add partition(
	partition p3 values less than(MAXVALUE)
);
# 添加一个分区,也就是p3是id从11到maxValue的存放区域

此时插入id=11的数据,并执行查询解析:

    发现,已经将其分配到p3分区中了。

还需要特别注意的时,使用partition by range(分区字段),其中的分区字段可以是分区字段的表单式,但是必须是返回的整数,在5.5版本中,可以使用partition by range column/columns语法,指定某个字段。这里不做介绍。大家可以自己尝试一下。

4.2 list分区

list分区可以理解为集合分区方式,意思就是指定某个集合来分区。

语法展示:

   partition by list(分区字段表达式)(
     partition 分区名 values in(value1, value2,...,valuen)#分区集合
   );

示例展示:

create table test_list(
	id int auto_increment,
	description varchar(50),
	primary key(id)
)ENGINE=InnoDB auto_increment=1 default charset=utf8
partition by list(id)(
	partition p1 values in (1, 3, 5, 7, 9),#id=1,3,5,7,9分配至p1区
	partition p2 values in (2, 4, 6, 8, 10)#id=2,4,6,8,10分配至p2区
);
#可以如4.1中使用show create table test_list查看表创建结构。

数据测试:使用4.1中数据测试sql,插入10条数据。

    可以发现其查询的仅仅是p1区。如果需要添加分区,可以使用4.1中使用的add partition来添加分区。

4.3 hash分区

使用hash函数得到取模,分配到不同的分区中。分区表达式必须返回整数。

语法展示:

   partition by hash(分区表达式) partitions 表数量(模数).

示例展示:

create table test_hash(
	id int auto_increment,
	description varchar(50),
	primary key(id)
) ENGINE=InnoDB auto_increment=1 default charset=utf8
partition by hash(id) partitions 3; #以id分区,分配到3张表中

数据测试:插入4.1类同10条数据

你也可以尝试修改id值,查看其分配的分区。hash分区还有一种叫做linear hash线性分区,这里不做介绍,

4.4 key分区

在本次开发中,我选择的是key分区,因为其是针对一个或多个字段作为分区字段,不要求是正整数,其内部调用的是自己的hash函数,计算出hash整数值,然后取模分表。

语法展示:

   partition by key(分区字段组合) partitions 表数(模数)。

操作和Hash分区一致,这里就不做累赘的展示了。

5.额外扩展

5.1 在实际开发中,经常出现的情况是表已经上线使用,那么必须动态添加分区类型。

   alter table 表名 partition by hash/key (分区字段表达式) [partitions 表数]#如果不加partitions那么默认为1.
   
   alter table 表名 partition by range/list(分区字段表达式)(具体分区设置)。

5.2 当发现之前的分区需要添加新的分区时,采取如下方式:

   list/range : alter table 表名 add partition (partition 分区名 [values in|values less than] [集合|数值]);
   hash/key : alter table 表名 add partition partitions 表数;

例如:修改上述test_hash的分区数量

   alter table test_hash add partition partitions 6;

5.3 删除某个分区/删除所有分区

   # 删除某个分区
   list/range : alter table 表名 drop partition 分区名1, 分区名2,...;
   #例如:
   alter table test_list drop partition p1;
   hash/key : 上述语法不成立
   
   # 删除整个分区
   alter table test_hash remove partitioning;

还有诸如合并分区,以及5.5的一些新特性,list/range 增加column,columns支持。本文不做过多阐述。

时间: 2024-11-03 21:12:18

【MYSQL】 分区表的相关文章

MySQL分区表(转)

查看分区情况 SELECT * FROM information_schema.PARTITIONS WHERE table_name='table_name': PARTITION_NAME:分区的名称 PARTITION_METHOD:分区的类型 TABLE_ROWS:分区数据条数 RANGE分区: create table t ( id int) engine=innodb partition by range (id) ( partition p0 values less than (1

MySQL分区表使用方法

原文:MySQL分区表使用方法 1. 确认MySQL服务器是否支持分区表 命令: show plugins; 2. MySQL分区表的特点 在逻辑上为一个表,在物理上存储在多个文件中 HASH分区(HASH) HASH分区的特点 根据MOD(分区键,分区数)的值把数据行存储到表的不同分区中 数据可以平均的分布在各个分区中 HASH分区的键值必须是一个INT类型的值,或是通过函数可以转为INT类型 如何建立HASH分区表 以INT类型字段 customer_id为分区键 CREATE TABLE

MySQL 分区表原理及数据备份转移实战

1.分区表含义 分区表定义指根据可以设置为任意大小的规则,跨文件系统分配单个表的多个部分.实际上,表的不同部分在不同的位置被存储为单独的表.用户所选择的.实现数据分割的规则被称为分区函数,这在MySQL中它可以是模数,或者是简单的匹配一个连续的数值区间或数值列表,或者是一个内部HASH函数,或一个线性HASH函数. 分表与分区的区别在于:分区从逻辑上来讲只有一张表,而分表则是将一张表分解成多张表. 2.分区表优点 1)分区表更容易维护.对于那些已经失去保存意义的数据,通常可以通过删除与那些数据有

mysql分区表

分区表   分区表的优点: 数据分开存放在不同的文件,可以支持更大的数据文件 在某些特定条件下能提高查询.删除.更新的效率   1.range分区表   mysql> create table mytest(id int,name varchar(20) not null,birthday date,primary key(id,birthday))auto_increment=1 partition by range(year(birthday))( partition p01 values

MySQL分区表姿势

大部分内容整理自姜承尧的innodb存储引擎2学习笔记. 分区: 分区的功能不是在存储引擎层实现的.因此不只是InnoDB才支持分区.MyISAM.NDB都支持分区操作. 分区的过程是将一个表或者索引分解为多个更小.更可管理的部分.从逻辑上将,只有一个表或者索引,但是在物理上这个表或索引可能由数十个物理分区组成. 每个分区都是独立的对象,可以独自处理,也可以作为一个更大对象的一部分进行处理. MySQL只支持水平分区,不支持垂直分区. 水平分区:将同一表中不同行的记录分配到不同的物理文件中. 垂

MySQL分区表管理

RANGE,LIST分区管理 1:为未分区表创建分区 ALTER TABLE trb3 PARTITION BY KEY(id) PARTITIONS 2; 2:删除某个分区的数据 ALTER TABLE tr DROP PARTITION p2; 3:为分区表添加一个分区 ALTER TABLE members ADD PARTITION (PARTITION p3 VALUES LESS THAN (2000)); ALTER TABLE tt ADD PARTITION (PARTITIO

MySQL 分区表

今天统计数据的时候发现一张表使用了表分区,借此机会记录一下. 1. 什么是表分区? 表分区,是指根据一定规则,将数据库中的一张表分解成多个更小的,容易管理的部分.从逻辑上看,只有一张表,但是底层却是由多个物理分区组成. 2. 表分区与分表的区别 分表:指的是通过一定规则,将一张表分解成多张不同的表.比如将用户订单记录根据时间成多个表. 分表与分区的区别在于:分区从逻辑上来讲只有一张表,而分表则是将一张表分解成多张表. 3. 表分区有什么好处? 1)分区表的数据可以分布在不同的物理设备上,从而高效

MySQL分区表的管理~2

一.维护分区 对于表的维护,我们一般有如下几种方式: CHECK TABLE, OPTIMIZE TABLE, ANALYZE TABLE和REPAIR TABLE. 而这几种方式,对于分区同样适用.下面,我们一一阐述各种的作用. 1. Rebuilding partitions 重建分区,它相当于先删除分区中的数据,然后重新插入.这个主要是用于分区的碎片整理. 譬如: ALTER TABLE t1 REBUILD PARTITION p0, p1; 2. Optimizing partitio

MySQL 分区表原理及使用详解

今天统计数据的时候发现一张表使用了表分区,借此机会记录一下. 1. 什么是表分区? 表分区,是指根据一定规则,将数据库中的一张表分解成多个更小的,容易管理的部分.从逻辑上看,只有一张表,但是底层却是由多个物理分区组成. 2. 表分区与分表的区别 分表:指的是通过一定规则,将一张表分解成多张不同的表.比如将用户订单记录根据时间成多个表. 分表与分区的区别在于:分区从逻辑上来讲只有一张表,而分表则是将一张表分解成多张表. 3. 表分区有什么好处? 1)分区表的数据可以分布在不同的物理设备上,从而高效

mysql 分区表详解

项目中要一张库表实现 list分区.并且支持多种数据库. oracle 很顺利,只是mysql 听说5.1版本就已经支持了, 可是试了很多个版本,都不行,后来查到原因是要5.5 以上版本 分区才支持 varchar, 可是试到 5.6 都一直报错: "VALUES value for partition 'P_XX' must have type INT" 后来才发现.原来没有查对资料,走了弯路.是LIST COLUMNS才支持 varchar类型的分区字段. mysql 官方文档