为什么SQL INSERT语句在高并发环境下频繁出现主键冲突(Duplicate Key)?

梦明酱_6260

梦明酱_6260

2026-06-09

832人浏览

原创

主键冲突本质是innodb加锁机制导致的锁等待,而非单纯数据重复;insert ignore因不加x锁更抗并发,而on duplicate key update需严格保序防间隙锁死等。

为什么sql insert语句在高并发环境下频繁出现主键冲突(duplicate key)?

主键冲突不是“撞上了”,是事务加锁机制在起作用

MySQL 报 Duplicate entry for key 'PRIMARY' 看似是数据重复,但高并发下更常见的现象是“卡住几秒后报错”或直接超时——这说明问题不在数据本身,而在锁等待。根本原因是 INSERT ... ON DUPLICATE KEY UPDATE 会在检查唯一性前就对目标行(或间隙)加 X lock 和 insert intention lock。多个事务同时插相同主键(比如订单号、设备 ID),第一个持锁,其余全卡在 lock_mode X locks gap before rec insert intention waiting 状态。

常见诱因包括:

  • 应用层用本地时间戳+随机数生成 ID,毫秒内重复率高
  • 消息重试未做幂等,同一事件被消费多次
  • 分库分表后雪花 ID 生成器漂移,不同节点产出相近值
  • 批量插入语句中 VALUES() 内主键乱序,触发交叉间隙锁

INSERT IGNORE 为什么比 ON DUPLICATE KEY UPDATE 更抗并发

INSERT IGNORE 在检测到唯一键冲突时直接跳过,不加 X lock,不触发行更新,也不维护二级索引变更日志;而 ON DUPLICATE KEY UPDATE 即使 UPDATE 子句没真改字段(比如写成 id=id),也会对目标行加 X lock,并可能引发索引分裂。语义允许“冲突即丢弃”时,应无条件选 INSERT IGNORE。

使用要点:

Pazi
Pazi

一款AI工具,主要用于多智能体AI自动化商业运营平台,适合需要提升相关任务效率的用户。

下载
  • 用 ROW_COUNT() 判断结果:返回 1 表示新增,0 表示因冲突被忽略
  • 不能靠它捕获其他错误(如字段类型不匹配),因为它对所有约束违规都静默忽略
  • 建表时确认只有 PRIMARY KEY 或明确的 UNIQUE KEY,普通索引不会触发 ignore 行为

批量插入必须升序,否则间隙锁会互相死等

InnoDB 的间隙锁机制决定了:只要一批 INSERT VALUES () 中的主键值乱序,就大概率触发交叉加锁。例如插入 (100, 'a'), (99, 'b'), (101, 'c'),事务 A 锁了 99–100 间隙,事务 B 锁了 100–101 间隙,互相等待——这不是死锁,但会触发 Lock wait timeout exceeded。

实操要求:

  • 应用层插入前必须 ORDER BY id ASC,不能依赖 INSERT ... SELECT ... ORDER BY(它不影响间隙锁行为)
  • 单批不超过 500 行;超量必须拆成多条语句,每条内部严格升序
  • 若用雪花 ID,生成后立刻在内存排序,再拼 SQL;禁用 UUID() 或 MD5() 直接作主键

REPLACE INTO 是伪 UPSERT,别在关键路径上用

REPLACE INTO 本质是 DELETE + INSERT,不是原子操作。它会破坏外键引用、触发 BEFORE/AFTER DELETE 触发器,还让 AUTO_INCREMENT 计数器跳号。在有 ON DELETE CASCADE 的表里,关联行会被连带删除;若业务依赖触发器做审计,你会看到一条 DELETE 日志 + 一条 INSERT 日志,语义完全失真。

更隐蔽的问题:

  • REPLACE INTO 影响行数可能是 2(新插)或 3(删+插),而 ON DUPLICATE KEY UPDATE 是 1 或 2,下游监控容易误判
  • 它不满足幂等性:两次相同 REPLACE 会导致自增 ID 增长两次
  • PostgreSQL 和 SQL Server 根本没有这个语法,强行迁移成本高
真实并发场景里,最易被忽略的是“批量插入前是否保序”和“有没有把 ON DUPLICATE KEY UPDATE 当成廉价的幂等开关”。这两点一旦出错,压力一上来,锁等待就会从毫秒级迅速恶化成秒级甚至超时。
PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4083

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

871

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1069

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5961

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2863

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5940

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7921

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1090

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

952

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习