如何在MySQL 5.7中通过分区表策略减少全局锁竞争?

落枫酱_3310

落枫酱_3310

2026-06-19

630人浏览

原创

分区表不能缓解buf_pool_mutex锁竞争,仅innodb_buffer_pool_instances参数可降低该全局锁争用;分区表真正缓解的是行锁/表锁粒度导致的dml并发瓶颈,前提是分区键包含在主键或唯一索引中,且写入能自然分散到多分区。

如何在mysql 5.7中通过分区表策略减少全局锁竞争?

分区表本身不能减少 buf_pool_mutex 这类 Buffer Pool 全局锁竞争——这是常见误解。真正能缓解 Buffer Pool 锁争抢的,只有 innodb_buffer_pool_instances 参数调优;而分区表缓解的是另一类锁:行锁/表锁粒度带来的并发瓶颈,尤其是 DML 高频写入同一热点页或索引页时。

分区表对锁竞争的实际作用边界在哪里

MySQL 分区表在 InnoDB 引擎下,每个分区是独立的 .ibd 文件,拥有各自的 B+ 树索引、页缓存和锁管理单元。这意味着:

  • 不同分区上的 INSERT/UPDATE/DELETE 操作可并行执行,互不阻塞(只要不跨分区)
  • 同一分区内的行锁仍受标准 InnoDB 行锁机制约束,不会因为分区就“自动变细粒度”
  • DROP PARTITION 是元数据操作 + 文件删除,不触发行锁,比 DELETE FROM ... WHERE time 快几个数量级,且不产生成千上万的 undo log 和锁等待
  • 分区键若未包含在主键/唯一索引中,会导致索引失效,反而引发全分区扫描和更重的锁竞争

必须满足的分区键与索引组合条件

InnoDB 要求:如果表有主键或唯一索引,分区键字段必须全部包含在这些索引中。否则建表会失败,或导致查询无法 prune 分区(即“查所有分区”),锁范围爆炸。

错误示例:CREATE TABLE logs (id BIGINT PRIMARY KEY, ts DATETIME, msg TEXT) PARTITION BY RANGE (YEAR(ts)) → 报错 ERROR 1503 (HY000): A PRIMARY KEY must include all columns in the table's partitioning function

正确做法(二选一):

  • 把 ts 加入主键:PRIMARY KEY (id, ts)
  • 改用无主键表(不推荐),或改用 KEY(ts) + PARTITION BY RANGE COLUMNS(ts)

否则即使建表成功,SELECT * FROM logs WHERE ts BETWEEN '2024-01-01' AND '2024-06-01' 也可能扫描全部分区,锁住远超必要的数据页。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

分区策略选择直接影响锁分散效果

不是所有分区方式都能缓解锁竞争。关键看写入是否天然分散到不同分区:

  • RANGE 分区(按时间):适合日志类、订单类场景。新写入集中在最新分区(如 p202606),旧分区只读,锁竞争集中在单一分区 —— 此时没缓解,反而加剧热点
  • LIST/HASH 分区(按业务 ID 或哈希):如 PARTITION BY HASH(user_id % 8),能把用户写入打散到 8 个分区,显著降低单一分区的锁排队概率
  • 注意:HASH 分区无法 DROP 单个分区删旧数据,需配合归档表或 TRUNCATE 替代

验证是否生效:执行 SHOW PROFILE FOR QUERY N 或观察 INFORMATION_SCHEMA.INNODB_TRX 中事务锁等待的 LOCK_TRX_ID 是否集中于少数分区对应的表空间 ID(SPACE 字段)。

为什么你看到 QPS 上不去,却查不到明显锁等待?

当 Buffer Pool 实例数为 1,且 innodb_buffer_pool_size 设得很大(比如 12G),高并发下大量线程卡在 buf_pool_mutex 等待,但 SHOW ENGINE INNODB STATUS\G 的 TRANSACTIONS 段可能只显示“waiting for lock”,而 SEMAPHORES 段会出现大量 RW-latch created in file buf0buf.cc —— 这才是真瓶颈,不是分区能解决的。

此时该优先检查:

  • SELECT @@innodb_buffer_pool_instances 是否为 1
  • SHOW GLOBAL STATUS LIKE 'innodb_buffer_pool_wait_free' 值是否持续增长
  • SET GLOBAL innodb_buffer_pool_instances = 8(需配合 chunk_size 计算,避免 OOM)

分区表和 innodb_buffer_pool_instances 解决的是不同层级的并发瓶颈,混用前得先分清当前卡点在哪一层。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2133

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1319

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

775

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2912

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4868

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1119

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5131

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4522

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

5954

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 182人学习