如何处理MySQL 5.7升级到8.0时的临时表性能抖动_调整internal_tmp_mem_storage_engine

胖静吖_9339

胖静吖_9339

2026-05-25

746人浏览

原创

升级后group by/distinct变慢,主因是mysql 8.0.16起internal_tmp_mem_storage_engine默认从memory切为temptable,而temptable_max_ram仍为默认1gb,导致隐式临时表频繁落盘;需检查并调大temptable_max_ram至与tmp_table_size/max_heap_table_size匹配。

如何处理mysql 5.7升级到8.0时的临时表性能抖动_调整internal_tmp_mem_storage_engine

升级后临时表性能突然变差,大概率不是SQL写法问题,而是internal_tmp_mem_storage_engine默认值变了,且配套参数没跟上。

为什么升级后 GROUP BY / DISTINCT 变慢了?

MySQL 8.0.16 起,internal_tmp_mem_storage_engine 默认从 MEMORY 切成了 TEMPTABLE。这个切换本身是优化,但如果你沿用 5.7 的配置(比如只调大了 tmp_table_size),TEMPTABLE 实际能用的内存池仍被卡在默认的 1GB 以内,而旧版 MEMORY 表是直接硬扛到 max_heap_table_size 才报错——结果就是:原来全程内存跑的查询,现在频繁分页落盘,IO 暴增。

  • TEMPTABLE 是否落盘,看的是 temptable_max_ram,不是 tmp_table_size
  • tmp_table_size 和 max_heap_table_size 对 TEMPTABLE 仅间接起作用:只有当它们中较小值 ≤ temptable_max_ram 时,TEMPTABLE 才可能全程走内存
  • 升级后没动配置,temptable_max_ram 仍是默认 1G,但业务数据量已增长,隐式临时表一超就写磁盘

怎么快速验证是不是这个原因?

连上库,执行这两条命令:

SELECT @@internal_tmp_mem_storage_engine;
SELECT @@temptable_max_ram, @@tmp_table_size, @@max_heap_table_size;

如果返回 TEMPTABLE 且 temptable_max_ram 是 1073741824(即 1GB),而另外两个参数远大于它(比如设成了 2G),那基本就是它了。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 别只查 tmp_table_size 就以为“临时表内存够大”——对 TEMPTABLE 来说,它是失效的
  • 错误日志里如果频繁出现 Writing temp table to disk 或 Using external sort,也是强信号

调整 internal_tmp_mem_storage_engine 配置要注意什么?

不建议强行切回 MEMORY,除非你确认所有隐式临时表都不含 TEXT/BLOB、行长度可控、并发不高。更稳妥的是调优 TEMPTABLE 行为:

  • 在 [mysqld] 段下设置 temptable_max_ram,值建议设为 tmp_table_size 和 max_heap_table_size 中的较小值(例如都设 2G,这里就设 2147483648)
  • 如果机器内存紧张或跑在容器里,把 temptable_use_mmap 设为 OFF,避免 mmap 占用过多虚拟地址空间引发 OOM
  • 改完必须重启 MySQL 生效,热加载不支持这个参数
  • 不要在会话级 SET 这个变量——internal_tmp_mem_storage_engine 是全局只读变量,SET 会报错

升级后还有临时表报错怎么办?

常见两类报错,和引擎切换强相关:

  • ERROR 1163 (42000): The used table type doesn't support BLOB/TEXT columns → 这是 MEMORY 引擎在作祟,说明某处显式创建了 TEMPORARY TABLE ... ENGINE=MEMORY 且含大字段,得改成 ENGINE=InnoDB 或删掉 ENGINE 子句让其走默认 TEMPTABLE
  • ERROR 1114 (HY000): The table is full → 大概率是没关 temptable_use_mmap,容器环境 mmap 分配失败,或者 temptable_max_ram 设得太小又没配好 tmpdir 导致磁盘写失败

真正麻烦的点在于:这些行为变化不会在慢日志里直接体现,也不会报错说“你该调 temptable_max_ram”,得靠组合判断。别只盯着 SQL 改写,先确认引擎和内存池的实际边界在哪。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2333

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1419

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

835

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3292

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

5588

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1219

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5871

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

5102

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6814

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 190人学习