>  기사  >  데이터 베이스  >  MySQL 파티션 테이블의 제한사항을 자세히 설명하는 코드 예제

MySQL 파티션 테이블의 제한사항을 자세히 설명하는 코드 예제

黄舟
黄舟원래의
2017-03-17 14:02:581688검색

이 글은 Mysql 파티션 테이블의 한계를 요약한 것입니다. 개인 능력이나 테스트 환경으로 인해 오류가 있을 수 있으니 꼭 지적해 주시기 바랍니다. 공식 홈페이지에서 확인해보세요.

빌드 금지

파티션 표현식은 다음 빌드를 지원하지 않습니다:

저장 프로시저, 저장 함수 , UDFS 또는 플러그인

변수 또는 사용자 변수 선언

파티션

산술 및 논리 연산자

파티션 표현식은 +, -, * 산술 연산을 지원하지만 p 및 / 연산은 지원하지 않습니다(아직 존재합니다. Bug #30188, Bug #33182를 확인하세요). 그러나 결과는 정수 또는

NULL이어야 합니다(선형 파티션 키 제외, 자세한 내용은 파티션 유형 참조).

파티션 표현식은

비트 연산을 지원하지 않습니다: |, &, ^, 071af19a55f4da1989e8c02b755ba052>, ~ .

HANDLER 문

MySQL 5.7.1 이전의 파티션된 테이블은 HANDLER 문을 지원하지 않으며 이후 버전에서는 이 제한을 취소합니다.

서버 SQL 모드

사용자 정의 파티션 테이블을 사용하려면 파티션 테이블 생성 시 SQL 모드가 다음과 같다는 점에 유의해야 한다. 예약되지 않았습니다. 서버 SQL 모드 장에서 설명한 대로 대부분의 MySQL 함수 및 연산자의 결과는 서버 SQL 모드에 따라 변경될 수 있습니다. 따라서 분할된 테이블을 생성한 후 SQL 스키마가 변경되면 해당 테이블의 동작에 상당한 변화가 발생하여 데이터 손실이나 손상이 쉽게 발생할 수 있습니다. 위와 같은 이유로 파티션 테이블을 생성한 후에는 서버의 SQL 모드를 절대로 수정하지 않는 것이 좋습니다.

위 상황을 설명하는 예를 들어보세요.

1.

오류 처리

mysql> CREATE TABLE tn (c1 INT)
  ->    PARTITION BY LIST(1 p c1) (
  ->    PARTITION p0 VALUES IN (NULL),
  ->    PARTITION p1 VALUES IN (1)
  -> );
  Query OK, 0 rows affected (0.05 sec)

MySQL을 0으로 나눈 기본 결과는 NULL이 아니라 NULL입니다. 오류:

mysql> SELECT @@sql_mode;
+------------+
| @@sql_mode |
+------------+
|      |
+------------+
1 row in set (0.00 sec)
 
mysql> INSERT INTO tn VALUES (NULL), (0), (1);
Query OK, 3 rows affected (0.00 sec)
Records: 3 Duplicates: 0 Warnings: 0

그러나 SQL 스키마를 수정하면 오류가 보고됩니다.

mysql> SET sql_mode='STRICT_ALL_TABLES,ERROR_FOR_pISION_BY_ZERO';
Query OK, 0 rows affected (0.00 sec)
 
mysql> INSERT INTO tn VALUES (NULL), (0), (1);
ERROR 1365 (22012): pision by 0

2. 테이블 보조 기능

가끔 SQL 스키마가 수정되어 파티션 테이블을 사용할 수 없게 될 수 있습니다. 예를 들어, 일부 테이블은 SQL 모드가 NO_UNSIGNED_SUBTRACTION인 경우에만 작동합니다. 예:

mysql> SELECT @@sql_mode;
+------------+
| @@sql_mode |
+------------+
|      |
+------------+
1 row in set (0.00 sec)
 
mysql> CREATE TABLE tu (c1 BIGINT UNSIGNED)
  ->   PARTITION BY RANGE(c1 - 10) (
  ->   PARTITION p0 VALUES LESS THAN (-5),
  ->   PARTITION p1 VALUES LESS THAN (0),
  ->   PARTITION p2 VALUES LESS THAN (5),
  ->   PARTITION p3 VALUES LESS THAN (10),
  ->   PARTITION p4 VALUES LESS THAN (MAXVALUE)
  -> );
ERROR 1563 (HY000): Partition constant is out of partition function domain
   
mysql> SET sql_mode='NO_UNSIGNED_SUBTRACTION';
Query OK, 0 rows affected (0.00 sec)
 
mysql> SELECT @@sql_mode;
+-------------------------+
| @@sql_mode       |
+-------------------------+
| NO_UNSIGNED_SUBTRACTION |
+-------------------------+
1 row in set (0.00 sec)
 
mysql> CREATE TABLE tu (c1 BIGINT UNSIGNED)
  ->   PARTITION BY RANGE(c1 - 10) (
  ->   PARTITION p0 VALUES LESS THAN (-5),
  ->   PARTITION p1 VALUES LESS THAN (0),
  ->   PARTITION p2 VALUES LESS THAN (5),
  ->   PARTITION p3 VALUES LESS THAN (10),
  ->   PARTITION p4 VALUES LESS THAN (MAXVALUE)
  -> );
   
Query OK, 0 rows affected (0.05 sec)

tu를 생성한 후 SQL 모드를 수정하면 더 이상 이 테이블에 액세스하지 못할 수 있습니다.

mysql> SET sql_mode='';Query OK, 0 rows affected (0.00 sec)
 
mysql> SELECT * FROM tu;
ERROR 1563 (HY000): Partition constant is out of partition function domain
 
mysql> INSERT INTO tu VALUES (20);
ERROR 1563 (HY000): Partition constant is out of partition function domain

서버 측 SQL 모드는 분할된 테이블의 복제에도 영향을 미칩니다. 기본 서버와 보조 서버 간에 서로 다른 SQL 모드를 사용하면 기본 서버와 보조 서버에서 파티션 표현식의 실행 결과가 달라질 수 있습니다(그리고 Alibaba에서 기본 서버와 보조 서버 간 전환은 정상적인 작업입니다). 기본 및 보조 복제 프로세스는 간격의 데이터 분포가 다르기 때문에 기본 데이터베이스의 파티션 테이블 삽입이 성공하지만 대기 데이터베이스에서는 실패할 수도 있습니다. 위의 상황을 바탕으로 가장 좋은 해결책은 기본 서버와 보조 서버 간의 SQL 모드가 일관되게 유지되도록 하는 것입니다(이는 운영 및 유지 관리 과정에서 DBA가 주의해야 할 사항입니다).

성능참고

다음은 파티션 작업 성능에 영향을 미치는 몇 가지 요소입니다.

파일 시스템 작업 분할 또는 재분할(예: ALTER TABLE ...PARTITION BY ..., REORGANIZE PARTITION 또는 REMOVE PARTITIONING) 작업은 파일 시스템 구현에 따라 다릅니다. 이는 위의 작업이 파일 시스템의 유형 및 특성, 디스크 속도, 스왑 공간, 운영 체제의
파일 처리 효율성 및 파일 처리와 같은 운영 체제의 영향을 받는다는 것을 의미합니다. MySQL 서버의 관련 문제는 옵션, 변수 및 기타 요인에 영향을 미칩니다. Large_files_support가 활성화되어 있고 open_files_limit 설정이 적절한지 확인해야 합니다. MyISAM 엔진의 분할된 테이블의 경우 InnoDB 테이블의 성능을 향상하려면 myisam_max_sort_file_size를 늘려야 하며, 활성화된 innodb_file_per_table을 통해 분할 또는 재분할 작업이 더 빨라집니다.

최대 파티션 수를 참조할 수도 있습니다.

MyISAM 및 파티션 파일 설명자

MyISAM 파티션 테이블의 경우 MySQL은 열려 있는 각 테이블과 파티션에 대해 두 개의 파일 설명자를 사용합니다. 이는 MyISAM 분할 테이블에서 작업(특히 ALTER TABLE 작업)을 수행하려면 파티션이 없는 동일한 테이블보다 더 많은 파일 설명자가 필요함을 의미합니다.

100개의 파티션이 있는 MyISAM 테이블을 생성한다고 가정합니다.

CREATE TABLE t (c1 VARCHAR(50))
PARTITION BY KEY (c1) PARTITIONS 100
ENGINE=MYISAM;

간단히 말하면 이 예에서는 KEY 파티션을 사용하지만 파일 설명자 문제는 파티션 유형에 관계없이

테이블 엔진MyISAM을 사용하는 모든 파티션에서 발생합니다. 그러나 다른 스토리지 엔진(예: InnoDB)을 사용하는 분할된 테이블에는 이러한 문제가 없습니다.

t를 다시 파티션하고 101개의 파티션을 갖고 싶다고 가정하면 다음 명령문을 사용하십시오.

ALTER TABLE t PARTITION BY KEY (c1) PARTITIONS 101;

如果要处理ALTER TABLE语句需要402个文件描述符,原来100个分区*2个+101个新分区*2。这是因为在重新组织表数据时,必须打开所有的(新旧)分区。所以建议在执行这些操作时,要确保--open-files-limit要设置的大些。

表锁

对表执行分区操作的进程会占用表的写锁,不影响读,例如在这些分区上的INSERT和UPDATE操作只有在分区操作完成后才能执行。

存储引擎

分区操作,比如查询,和更新操作通常情况下用MyISAM引擎要比InnoDB和NDB快。

索引;分区修剪

分区表和非分区表一样,合理的利用索引可以显著地提升查询速度。另外,设计分区表以及在这些表上的查询,可以利用分区修剪来显著提升性能。

在MySQL 5.7.3版本之前,分区表不支持索引条件下推,之后的版本可以支持了。

load data性能

在MySQL 5.7,load data 使用buffer提高性能。你需要知道的是buffer会占用每个分区的130KB来达到这个目的。

分区的最大个数

如果不是用NDB作为存储引擎的分区表,支持分区(这里子分区也包含在内)最大个数是8192。

如果使用NDB作为存储引擎的用户自定义分区的最大分区个数,取决于MySQL Cluster的版本, 数据节点和其他因素。

如果你创建一个非常多(比最大分区数要少)的分区时,遇到诸如Got error ... from storage engine: Out of resources when opening file类的错误,你可能需要增加open_files_limit。但是open_files_limit其实也依赖操作系统,可能不是所有的平台都可以建议调整。还有一些其他情况,不建议使用巨大或者成百上千个分区,所以使用越来越多的分区并不见得能带来好结果。

不支持Query cache

分区表不支持query cache,在分区表的查询中自动避开了query cache。也就是说在分区表的查询语句中query cache是不起作用的。

每个分区一个key caches

在MySQL 5.7版本中,可以通过CACHE INDEX和LOAD INDEX INTO CACHE来使用MyISAM分区表的key cache。可以为一个,几个或者所有分区都定义key cache,这样可以把一个,几个或者所有分区的索引预加载到key cache中。

不支持InnoDB分区表的外键

使用InnoDB引擎的分区表不支持外键。下面的两种具体情况来阐述:

在InnoDB表不能使用包含有外键的自定义分区;如果已经使用了外键的InnoDB表,则不能被分区。

InnoDB表不能包含一个和用户自定义分区表相关的外键;使用了用户自定义分区的InnoDB表,不能包含和外键相关的列。

刚刚列出的限制的范围包括使用InnoDB存储引擎的所有表。违反这些限制的CREATE TABLE和ALTER TABLE语句是不被允许的。

ALTER TABLE ... ORDER BY

如果在分区表上执行ALTER TABLE ... ORDER BY的话,会导致每个分区的行排序。

REPLACE语句在修改primary key上的效率

在某些情况下是需要修改表的primary key的,如果你的应用程序使用了REPLACE语句,这些语句的结果可能会被大幅度修改。

全文索引

分区表不支持全文索引或者搜索,即使分区表的存储引擎是InnoDB或者MyISAM也不行。

空间列

分区表不支持空间列,比如点或者几何。

临时表

不能对临时表进行分区(Bug #17497)。

日志表

不能对日志表进行分区,如果强制执行ALTER TABLE ... PARTITION BY ... 语句会报错。

分区键的数据类型

分区键必须是整形或者结果是整形的表达式。不能用结果为ENUM类型的表达式。因为这种类型的表达式可能是NULL。

下面两种情况是例外的:

当用LINER分区时,可以使用除TEXT或者BLOBS以外的数据类型作为分区键,因为MySQL内部的 hash函数会从这些列中产生正确的数据类型。例如,下面的创建语句是合法的:

CREATE TABLE tkc (c1 CHAR)
PARTITION BY KEY(c1)
PARTITIONS 4;

CREATE TABLE tke
  ( c1 ENUM('red', 'orange', 'yellow', 'green', 'blue', 'indigo', 'violet') )
PARTITION BY LINEAR KEY(c1)
PARTITIONS 6;

当用RANGE,LIST,DATE或者DATETIME列分区的话,可能会用string。例如,下面的创建语句是合法的:

CREATE TABLE rc (c1 INT, c2 DATE)
PARTITION BY RANGE COLUMNS(c2) (
  PARTITION p0 VALUES LESS THAN('1990-01-01'),
  PARTITION p1 VALUES LESS THAN('1995-01-01'),
  PARTITION p2 VALUES LESS THAN('2000-01-01'),
  PARTITION p3 VALUES LESS THAN('2005-01-01'),
  PARTITION p4 VALUES LESS THAN(MAXVALUE)
);

CREATE TABLE lc (c1 INT, c2 CHAR(1))
PARTITION BY LIST COLUMNS(c2) (
  PARTITION p0 VALUES IN('a', 'd', 'g', 'j', 'm', 'p', 's', 'v', 'y'),
  PARTITION p1 VALUES IN('b', 'e', 'h', 'k', 'n', 'q', 't', 'w', 'z'),
  PARTITION p2 VALUES IN('c', 'f', 'i', 'l', 'o', 'r', 'u', 'x', NULL)
);

上述异常都不适用于BLOB或TEXT列类型。

子查询

即使子查询避开整形值或者NULL值,分区键不能子查询。

子分区的问题

子分区必须使用HASH或者KEY分区。只有RANGE和LIST分区支持被子分区;HASH和KEY不支持被子分区。

SUBPARTITION BY KEY要求显示指定子分区列,不像PARTITION BY KEY可以省略(这种情况下会默认使用表的primary key)。例如,如果是这样创建表:

CREATE TABLE ts (
  id INT NOT NULL AUTO_INCREMENT PRIMARY KEY,
  name VARCHAR(30)
);

你也可以使用相同的列的创建分区表(以KEY分区),使用下面语句:

CREATE TABLE ts (
  id INT NOT NULL AUTO_INCREMENT PRIMARY KEY,
  name VARCHAR(30)
)
PARTITION BY KEY()
PARTITIONS 4;

前面的语句其实和下面的语句是一样的:

CREATE TABLE ts (
  id INT NOT NULL AUTO_INCREMENT PRIMARY KEY,
  name VARCHAR(30)
)
PARTITION BY KEY(id)
PARTITIONS 4;

但是,如果尝试使用缺省列作为子分区列,创建子分区表的话,以下语句将失败,必须指定该语句才能执行成功,如下所示:(bug已知 Bug #51470)。

mysql> CREATE TABLE ts (
  ->   id INT NOT NULL AUTO_INCREMENT PRIMARY KEY,
  ->   name VARCHAR(30)
  -> )
  -> PARTITION BY RANGE(id)
  -> SUBPARTITION BY KEY()
  -> SUBPARTITIONS 4
  -> (
  ->   PARTITION p0 VALUES LESS THAN (100),
  ->   PARTITION p1 VALUES LESS THAN (MAXVALUE)
  -> );
   
ERROR 1064 (42000): You have an error in your SQL syntax; check the manual that
corresponds to your MySQL server version for the right syntax to use near ')
 
mysql> CREATE TABLE ts (
  ->   id INT NOT NULL AUTO_INCREMENT PRIMARY KEY,
  ->   name VARCHAR(30)
  -> )
  -> PARTITION BY RANGE(id)
  -> SUBPARTITION BY KEY(id)
  -> SUBPARTITIONS 4
  -> (
  ->   PARTITION p0 VALUES LESS THAN (100),
  ->   PARTITION p1 VALUES LESS THAN (MAXVALUE)
  -> );
   
Query OK, 0 rows affected (0.07 sec)

数据字典和索引字典选项

分区表的数据字典和索引字典受以下因素制约:

表级的数据字典和索引字典被忽略(Bug #32091)

在Windows系统上,MyISAM分区表不支持独立分区或子分区的数据字典和索引字典选项。但是支持InnoDB分区表的独立分区或者子分区的数据字典。

修复和重建分区表

分区表支持CHECK TABLE, OPTIMIZE TABLE, ANALYZE TABLE, 和 REPAIR TABLE语句。

另外,你也可以用ALTER TABLE ... REBUILD PARTITION在一个分区表上重建一个或多个分区;用ALTER TABLE ... REORGANIZE PARTITION同样可以重建分区。

从MySQL 5.7.2开始,子分区支持ANALYZE, CHECK, OPTIMIZE, REPAIR, 和 TRUNCATE操作。而在MySQL5.7.5之前的版本就已经引入REBUILD语法,只是不起作用(可以参考Bug #19075411, Bug #73130)。

分区表不支持mysqlcheck, myisamchk, 和 myisampack操作。

导出选项

在MySQL 5.7.4以前的版本,不支持InnoDB分区表的FLUSH TABLES语句的导出选项(Bug #16943907)。

위 내용은 MySQL 파티션 테이블의 제한사항을 자세히 설명하는 코드 예제의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명:
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.