MySQL存储过程中如何避免频繁创建临时表产生磁盘碎片

老雪君_9064

老雪君_9064

2026-11-18

480人浏览

原创

根本原因是临时表反复创建且未清理、数据量大、引擎配置不匹配,导致MySQL降级为磁盘临时表(如MyISAM),其物理页空洞累积形成碎片;典型诱因包括无索引ORDER BY、跨表GROUP BY、含TEXT/BLOB字段及循环中频繁CREATE+INSERT却不DROP。

mysql存储过程中如何避免频繁创建临时表产生磁盘碎片

为什么存储过程里临时表容易变磁盘碎片

根本原因不是“用了临时表”,而是临时表反复创建 + 未清理 + 数据量大 + 引擎配置不匹配,导致 MySQL 在内存不足时默默降级为磁盘临时表(Created_tmp_disk_tables上涨),而这些磁盘临时表底层用的是 MyISAM 或旧版 MEMORY 引擎,写入后不自动整理,物理页空洞越积越多——碎片就藏在这些被反复丢弃又重建的磁盘临时文件里。

典型诱因包括:GROUP BY 跨表、ORDER BY 无索引、含 TEXT/BLOB 字段、或在循环中反复 CREATE TEMPORARY TABLE + INSERT 却不 DROP。

CREATE TEMPORARY TABLE 的安全写法

MySQL 存储过程中不能用 IF NOT EXISTS 建临时表,一写就报错;也不能依赖“会话自动清理”来省事——同一会话多次调用存储过程时,同名临时表会冲突。

  • 每次执行前显式 DROP TEMPORARY TABLE IF EXISTS temp_result;(注意:IF EXISTS 这里合法,只用于 DROP)
  • 建表后立刻用 INSERT INTO temp_result SELECT ... 批量填充,别留空表;字段类型务必紧凑,比如用 TINYINT 代替 INT,VARCHAR(64) 代替 VARCHAR(255)
  • 超过 1 万行数据的临时表,必须加索引:哪怕只是 CREATE INDEX idx_id ON temp_result(id);,否则后续 JOIN 或 WHERE 会全表扫描,拖慢整个流程
  • 避免在 WHILE 循环体里重复建/删临时表;改用单次建表 + TRUNCATE TEMPORARY TABLE temp_result; 清空复用

用 INSERT SELECT 替代游标,但得防隐式落盘

INSERT INTO temp_table SELECT ... 比游标逐行插入快 30 倍以上,但它不是银弹——如果源查询本身触发了内部临时表(比如带 DISTINCT 或跨表 GROUP BY),那这个 SELECT 就可能先造一个磁盘临时表,再往你的临时表里灌数据,等于白优化。

win可用的mysql指令skill
win可用的mysql指令skill

安装、修复、更新或打包一个基于 Python 和 PyMySQL 实现的 Windows `mysql` 命令。适用于用户希望在 PowerShell/CMD 中输入 `mysql` 时重定向到 Python 实现、需要交互式输入 MySQL 连接信息、需要同步到当前用户本地 bin 目录,或需要将该能力封装成可公开复用的 Codex skill。

下载
  • 对源 SELECT 单独跑 EXPLAIN,确认没有 Using temporary 或 Using filesort
  • 若源数据含 NULL,目标字段定义为 NOT NULL,语句直接失败,得提前 COALESCE(col, '') 处理
  • 不要在 INSERT SELECT 里嵌套复杂子查询或函数(如 JSON_EXTRACT),优化器易误估行数,导致分配内存不足,被迫落盘
  • MySQL 8.0+ 默认 internal_tmp_mem_storage_engine = TempTable,比老 MEMORY 更稳;除非有明确理由,别手动指定 ENGINE=MEMORY

tmp_table_size 和 max_heap_table_size 怎么设才不翻车

这两个值决定“多大临时表能留在内存里”,但设高了反而危险:它们取较小值生效,且一旦超限就无声切到磁盘,还可能挤占 innodb_buffer_pool_size,引发雪崩。

  • 同步设置二者,例如都设为 268435456(256MB):SET GLOBAL tmp_table_size = 268435456; 和 SET GLOBAL max_heap_table_size = 268435456;
  • 绝对不能超过 innodb_buffer_pool_size 的 25%~30%,比如缓冲池是 8GB,这两个参数总和建议 ≤ 2.4GB
  • 全局修改后,记得写进 my.cnf 的 [mysqld] 段,否则重启失效;会话级修改(SET SESSION)只适合调试
  • 监控关键指标:SHOW STATUS LIKE 'Created_tmp_disk_tables';,如果该值 / Created_tmp_tables > 15%,说明 SQL 本身有问题,光调参没用

真正难啃的是那些“看起来合理”的 SQL:比如 GROUP BY a, b 有联合索引,但 WHERE 条件用了 c = ?,导致索引无法覆盖排序,照样造临时表。这类问题不会报错,只会悄悄把碎片堆进磁盘临时文件里——得靠 EXPLAIN 一行行盯执行计划,而不是靠猜。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql 存储过程

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2653

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1599

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

935

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3812

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

6688

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1379

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

6951

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

5902

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

8074

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程