怎样在MySQL中优化批量自增写入的锁并发策略

大萱同学_3993

大萱同学_3993

2026-10-29

369人浏览

原创

最有效手段是设innodb_autoinc_lock_mode=2且binlog_format=ROW;但仅对INSERT INTO t VALUES()类简单插入跳过锁,含SELECT/REPLACE/LOAD DATA的语句仍用语句级AUTO_INC表锁,导致高并发下排队阻塞。

怎样在mysql中优化批量自增写入的锁并发策略

直接改 innodb_autoinc_lock_mode=2 能缓解锁争用,但只对 INSERT INTO t VALUES () 类简单插入生效;含 SELECT、ON DUPLICATE KEY UPDATE 或混合模式的语句仍会卡表锁。

为什么 INSERT ... SELECT 一跑,其他插入就全堵住?

根本不是行锁或间隙锁的问题,是 InnoDB 在分配自增值时升级了锁粒度。默认 innodb_autoinc_lock_mode = 1 下,只要语句里带 SELECT(比如 INSERT INTO t SELECT * FROM s)、REPLACE SELECT 或 LOAD DATA,InnoDB 就会在执行前加语句级 AUTO_INC 表锁,整条语句结束才释放——哪怕只有一条这样的语句在跑,所有后续 INSERT 都得排队等。

现象很具体:show processlist 里一堆 Waiting for table level lock,慢日志里单条 INSERT 耗时从几毫秒跳到几百毫秒甚至秒级。

  • 确认是否真有这类语句:查慢日志或 performance_schema.events_statements_history,过滤含 SELECT 的 INSERT
  • 临时规避:把大 INSERT ... SELECT 拆成小批量 SELECT + 多值 INSERT,绕过语句级锁路径
  • 别指望 innodb_autoinc_lock_mode=2 能救它——mode=2 对这种语句照样退化为语句级锁

innodb_autoinc_lock_mode=2 的真实行为和硬限制

mode=2 是“预分配段”策略:一次拿一段 ID(如 100 个),事务回滚后不回收,导致主键空洞。这不是 bug,是设计取舍。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 必须确保 binlog_format = ROW,否则主从复制可能中断;用 SELECT @@binlog_format 验证
  • 不能依赖 ID 连续性:事务回滚、部分失败、重试都会扩大空洞;若业务用 ID+1 推算下一条或做分页,会出错
  • INSERT ... ON DUPLICATE KEY UPDATE 在 mode=2 下可能因预分配冲突触发内部重试,反而增加开销
  • 只加速 INSERT INTO t VALUES (1),(2) 这类纯值插入;INSERT INTO t (id, name) VALUES (NULL, 'a') 算 mixed-mode,不享受无锁

不调参数,怎么从写法上绕开自增锁瓶颈?

参数只是工具,真正压垮并发的常是写入模式本身。与其死磕锁,不如换写法:

  • 用多值 INSERT INTO t (a,b) VALUES (),(),() 替代循环单条,每批控制在 100–500 行,显式事务包裹(BEGIN; ... ; COMMIT)
  • 高冲突场景慎用 ON DUPLICATE KEY UPDATE:唯一键冲突频繁时易升间隙锁,考虑先 SELECT ... FOR UPDATE 再决定 INSERT 或 UPDATE
  • 超大批量导入优先用 LOAD DATA INFILE:绕过 SQL 解析层,快 3–10 倍,但注意 secure_file_priv 路径限制和编码一致性
  • 如果业务允许,把自增主键换成应用层生成的 ID(如雪花 ID),彻底避开 InnoDB 自增锁逻辑

最容易被忽略的一点:空洞不可回填,且不影响索引结构或查询性能,但所有基于 ID 连续性的假设(比如分页推算、硬编码递增逻辑、监控告警阈值)都会失效。上线前务必检查业务代码里有没有这类隐含依赖。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4583

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

951

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1209

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6561

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3323

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6540

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

8981

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1210

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1072

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 192人学习