如何排查MySQL由于大字段BLOB更新引发的行锁争用_采用垂直拆表策略

陌雪姑娘_5670

陌雪姑娘_5670

2026-05-15

377人浏览

原创

BLOB字段更新放大行锁争用,因InnoDB对含BLOB的行默认加全记录锁,且优化器易弃用二级索引,导致锁范围扩大、扫描行数激增;垂直拆表需解耦读写路径、新建扩展表并补建索引,同时防止单行高频更新与跨表事务。

如何排查mysql由于大字段blob更新引发的行锁争用_采用垂直拆表策略

为什么BLOB字段更新会放大行锁争用

不是BLOB本身“特别重”,而是InnoDB对含BLOB/TEXT列的行在更新时默认走聚簇索引全记录锁(X lock on clustered index record),哪怕只改其他普通字段。只要该行有BLOB,UPDATE语句就会锁住整行物理记录——包括所有变长字段的外部页指针。更关键的是,BLOB列不参与索引排序,导致优化器容易低估扫描成本,进而放弃使用二级索引,间接扩大锁范围。

常见错误现象:SHOW ENGINE INNODB STATUS\G里看到大量lock_mode X locks rec but not gap但trx_rows_locked远高于实际匹配行数;慢查日志中UPDATE语句rows_examined接近表总行数;QPS上不去但Innodb_row_lock_waits持续上涨。

  • 垂直拆表前,SELECT * FROM t WHERE id = 123也会加载BLOB内容,拖慢查询并加剧锁持有时间
  • 应用层ORM若未显式指定SELECT字段,极易触发隐式全字段读取
  • BLOB列即使为NULL,InnoDB仍为其保留20字节指针空间,影响页内行密度和锁竞争粒度

如何用information_schema定位BLOB锁热点行

不能只看INNODB_TRX,得结合INNODB_LOCKS和INNODB_LOCK_WAITS反查被锁的主键值,再关联到具体BLOB所在行。重点不是“谁在等”,而是“等哪一行”以及“那行有没有BLOB”。

实操建议:

  • 先执行SELECT trx_id, trx_mysql_thread_id, trx_query FROM information_schema.INNODB_TRX WHERE trx_state = 'LOCK WAIT'拿到等待事务
  • 用结果中的trx_id去INNODB_LOCK_WAITS查blocking_trx_id,再反查持锁事务的trx_mysql_thread_id
  • 通过performance_schema.threads和performance_schema.events_statements_current定位其原始SQL(需提前开启performance_schema)
  • 最后用该SQL中的WHERE条件(如WHERE order_id = 45678)去查原表,确认该行是否含非空BLOB字段:SELECT order_id, LENGTH(blob_content) > 0 AS has_blob FROM orders WHERE order_id = 45678

垂直拆表时BLOB字段迁移的关键细节

拆不是简单ALTER TABLE切走字段,要确保新旧路径完全解耦:老业务读写仍走原表(兼容过渡),新逻辑必须绕过BLOB列。否则拆了等于没拆,锁还是卡在原表主键上。

推荐步骤:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 新建扩展表:CREATE TABLE orders_blob_ext (order_id BIGINT PRIMARY KEY, blob_content LONGBLOB, updated_at TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP),注意order_id必须与原表一致且加主键,避免JOIN时额外锁
  • 原表删掉BLOB字段:ALTER TABLE orders DROP COLUMN blob_content(线上操作需评估MDL锁影响,建议低峰期+pt-online-schema-change)
  • 应用层改造:所有涉及BLOB的INSERT/UPDATE全部路由到orders_blob_ext;原表SELECT禁止*,明确排除BLOB字段
  • 补数据用INSERT IGNORE INTO orders_blob_ext SELECT order_id, blob_content, NOW() FROM orders_old,避免唯一键冲突

注意:orders_blob_ext表本身也需建INDEX(如按updated_at),否则SELECT ... ORDER BY updated_at LIMIT 10会触发全表扫描+全行锁。

拆完之后还要防哪些隐形坑

垂直拆表解决的是“锁粒度”,但不解决“锁频率”。如果业务仍是高频更新同一order_id的BLOB(比如实时上传图片缩略图),新表照样会因单行争用卡住。

必须同步做的几件事:

  • 检查orders_blob_ext的PRIMARY KEY是否被高频更新语句命中——若存在UPDATE orders_blob_ext SET blob_content = ? WHERE order_id = ?,就仍会锁单行;考虑加冗余字段做分片键,例如shard_id TINYINT,把同一订单的多次BLOB更新分散到不同物理行
  • 禁用AUTOCOMMIT=0下跨表事务:原表orders和扩展表orders_blob_ext更新必须拆成两个独立事务,否则锁范围跨表扩大
  • BLOB读取加缓存层:Nginx或应用层缓存/api/blob/{order_id}响应,降低数据库直接压力
  • 监控项要新增:SELECT COUNT(*) FROM information_schema.INNODB_TRX WHERE trx_query LIKE '%orders_blob_ext%',单独盯这个表的事务堆积

最易被忽略的一点:拆表后EXPLAIN显示type=ALL的查询,往往是因为忘了给orders_blob_ext建索引——它不再继承原表索引,而BLOB表又常被当作“附属表”被忽视。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4563

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

951

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1189

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6521

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3303

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6500

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

8901

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1210

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1052

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 192人学习