mysql中的锁优化与大规模并发处理

陌墨酱_1550

陌墨酱_1550

2026-01-12

779人浏览

原创

根本原因是事务持锁时间过长或锁粒度过大,InnoDB在RR级别下使用间隙锁,导致未命中数据时也阻塞插入;应优化索引、缩短事务、避免耗时操作、合理选择锁类型及批量策略。

mysql中的锁优化与大规模并发处理

为什么 SELECT ... FOR UPDATE 在高并发下会卡死?

根本原因不是锁本身,而是事务持有锁的时间过长,或锁粒度超出必要范围。InnoDB 默认在可重复读(RR)隔离级别下使用间隙锁(Gap Lock),SELECT ... FOR UPDATE 不仅锁住匹配行,还可能锁住索引间隙——哪怕 WHERE 条件没命中任何数据,也会阻塞其他事务插入相邻值。

实操建议:

  • 确保被 FOR UPDATE 查询的字段有有效索引,否则会升级为表级锁或全扫描加锁
  • 把锁操作尽量靠近事务末尾,避免在锁住行后执行耗时逻辑(如远程调用、复杂计算)
  • 若业务允许,改用 SELECT ... LOCK IN SHARE MODE + 应用层校验,减少排他锁竞争
  • 在 RR 级别下测试时,注意 INSERT INTO ... SELECT 或 UPDATE ... WHERE 语句也可能隐式触发间隙锁,引发死锁

如何避免 INSERT ... ON DUPLICATE KEY UPDATE 的锁冲突?

该语句在唯一键冲突时会先尝试插入,失败后转为更新,但整个过程会对目标行(包括冲突前的插入意向锁)加锁。在高并发写同一主键/唯一键场景下,极易出现锁等待甚至死锁。

关键点:

  • 它只对**实际命中或可能插入位置的索引记录**加锁,不是全表锁,但唯一索引上的竞争仍很激烈
  • 如果唯一键是复合索引,且 WHERE 条件未覆盖最左前缀,可能导致锁范围扩大
  • MySQL 8.0+ 中,INSERT ... ON DUPLICATE KEY UPDATE 在某些情况下会释放插入意向锁再获取更新锁,造成短暂窗口,但并发压力大时仍不可靠
  • 替代方案:先 SELECT ... FOR UPDATE 判断是否存在,再决定 INSERT 或 UPDATE——前提是能接受两次网络往返和更长的事务时间

innodb_lock_wait_timeout 调小就能解决超时问题?

不能。把 innodb_lock_wait_timeout 从默认 50 秒调成 1 秒,只是让等待更快失败,不减少锁争用本身。反而可能让应用频繁重试,加剧系统负载。

热点分析与爆款挖掘
热点分析与爆款挖掘

热点分析与爆款挖掘工具。当用户询问"全网最新话题"、"最近有什么热点"、"XX话题热度分析"、"XX有什么爆款内容"、"选题推荐"、"热点追踪"、"爆款挖掘"或"内容定位建议"时,必须使用本skill。自动挖掘抖音、小红书、公众号、快手、B站、微博、视频号、知乎、新闻门户等平台的爆款内容,聚合热门关键词,分析爆款规律,提供创作角度建议。适用于选题策

下载

真正有效的做法:

  • 用 SHOW ENGINE INNODB STATUS\G 查看最近死锁详情,定位哪类 SQL 和索引组合高频冲突
  • 监控 Innodb_row_lock_waits 和 Innodb_row_lock_time_avg,确认是否真存在锁瓶颈(而非 CPU 或磁盘 IO)
  • 检查慢查询日志中带 FOR UPDATE 或 LOCK IN SHARE MODE 的语句,它们往往事务长、索引差、逻辑重
  • 对热点行(如账户余额、库存计数器),考虑分段计数(如 10 个 bucket 取模更新)或异步化(写入消息队列后由消费者聚合)

批量更新时用 WHERE id IN (...) 还是逐条 UPDATE?

取决于数据分布与锁粒度。IN 列表若跨多个页、无序、或包含大量非聚集索引键,会导致锁顺序不一致,显著提升死锁概率;而逐条更新虽网络开销大,但锁获取顺序可控。

更稳妥的批量策略:

  • 按主键升序排序后再拼 IN 列表,保证加锁顺序一致
  • 拆成固定大小的批次(如每批 100 行),并控制批次间间隔,避免瞬时锁堆积
  • 避免在 IN 列表中混入不存在的 ID——InnoDB 仍会对对应间隙加锁
  • 对超大批量(>10k 行),优先考虑用临时表 + JOIN 更新:
    UPDATE t1 JOIN tmp_ids ON t1.id = tmp_ids.id SET t1.status = 'done';
    ,比长 IN 更稳定且易观察执行计划

锁优化没有银弹。最常被忽略的是:事务边界是否真正由业务语义定义,还是被 ORM 自动开启、又因异常未关闭?一个未提交的事务,可能让一行记录被锁住数分钟——这比任何索引优化都致命。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql 热点

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4723

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

971

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1249

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6741

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3463

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6720

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

9281

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1250

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1092

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 194人学习