如何解决MySQL 5.7中由于内部临时表引起的锁瓶颈?

轻杰酱_3077

轻杰酱_3077

2026-07-15

697人浏览

原创

mysql 5.7 中内部临时表锁瓶颈核心在于避免创建而非调大 tmp_table_size;因 memory 引擎强制固定行长、表级锁且超限即落盘 myisam(表级锁),导致内存浪费、频繁落盘与元数据锁争用,加剧并发恶化。

如何解决mysql 5.7中由于内部临时表引起的锁瓶颈?

直接结论:MySQL 5.7 中内部临时表引发的锁瓶颈,核心不是调大 tmp_table_size,而是避免它被创建;一旦创建,锁竞争和磁盘落盘会同时恶化并发性能。

为什么 internal_tmp_mem_storage_engine = MEMORY 会加剧锁争用

MySQL 5.7 默认用 MEMORY 引擎处理内存临时表,但它不支持变长字段(如 VARCHAR、TEXT),所有行按最大可能长度预分配——哪怕你只存 3 个字节,也占满整个列定义宽度。这导致:

  • 同样数据量下,MEMORY 表比实际需要多占 2–5 倍内存,快速触达 tmp_table_size 上限
  • 一超限就强制落盘为磁盘临时表(默认用 MyISAM 或 InnoDB),而磁盘临时表建表/写入过程会持 metadata lock,阻塞其他 DDL 和部分 DML
  • MEMORY 引擎本身使用表级锁(LOCK TABLES 级别),高并发 GROUP BY 或 ORDER BY 查询会排队等待同一把锁

如何确认当前正在用什么引擎建临时表

执行这条语句,看返回值:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
SELECT @@internal_tmp_mem_storage_engine;

如果返回 MEMORY(5.7 默认),且你频繁看到 Created_tmp_disk_tables 上升,说明已大量落盘。进一步验证是否真在用临时表:

  • 对可疑 SQL 加 EXPLAIN,看 Extra 字段是否含 Using temporary
  • 运行中查状态:SHOW STATUS LIKE 'Created_tmp%';,重点关注 Created_tmp_disk_tables 每秒增长量 > 0.5 就算异常
  • 抓取慢日志里带 GROUP BY / ORDER BY / DISTINCT 的语句,它们是临时表主力制造者

不升级 MySQL 版本的前提下怎么缓解

MySQL 5.7 无法原生启用 TempTable 引擎(那是 8.0+ 的),但可通过组合策略绕过 MEMORY 的硬伤:

  • 给 GROUP BY 或 ORDER BY 字段加联合索引,让排序/分组走索引覆盖,直接避免临时表 —— 这比调参有效十倍
  • 把 tmp_table_size 和 max_heap_table_size 设为相同值(例如 64M),防止因取小值而“意外”落盘
  • 禁用查询缓存(query_cache_type = 0),因为 QC 在某些场景下会强制触发临时表逻辑
  • 对批量统计类查询,改用应用层分页聚合,或拆成多个单条件 COUNT(*) + UNION ALL,避开复杂临时表路径

最容易被忽略的隐性锁点:磁盘临时表的引擎选择

当内存临时表落盘,MySQL 5.7 默认用 MyISAM 建磁盘临时表(除非显式指定 innodb_tmpdir)。而 MyISAM 是表级锁,一个大 GROUP BY 正在写磁盘临时表时,其他任何想读/写同名临时表的查询都得等。更麻烦的是:

  • 你无法通过配置切换这个默认行为(5.7 不支持 internal_tmp_disk_storage_engine)
  • 即使你设了 innodb_tmpdir,也只是把临时表文件放到指定路径,底层仍可能是 MyISAM
  • 所以真正有效的做法是:盯住 Created_tmp_disk_tables,只要它开始涨,就说明锁瓶颈已在发生,此时优化 SQL 比调参数更紧迫

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3983

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

851

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1029

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5841

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2763

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5820

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7721

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1050

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

912

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程