如何排查MySQL主从复制导致的临时文件溢出问题?

浅敏酱_6056

浅敏酱_6056

2026-08-07

775人浏览

原创

答案是主从复制中sql线程在从库执行ddl或引用临时表时,因tmp_table_size与max_heap_table_size不等或ibtmp1空间耗尽,导致临时表被迫落盘并报“the table is full”或“incorrect key file”错误。

如何排查mysql主从复制导致的临时文件溢出问题?

主从复制本身不直接生成临时文件,但复制过程中的DDL操作、SQL线程执行、临时表同步等行为会触发临时空间暴涨——问题通常出在从库,且常被误判为“主库写多”,实际是SQL线程在从库本地执行时撑爆ibtmp1或/tmp。

看Last_SQL_Error是否含Incorrect key file for table或The table is full

这是最直接的信号。一旦show slave status\G中出现:

  • Last_SQL_Errno: 1034 + Last_SQL_Error: Error 'Incorrect key file for table ...' → 基本锁定为临时表落盘失败
  • Last_SQL_Error里带The table is full → 不一定是磁盘满,更可能是内存临时表阈值被卡死,被迫写入磁盘临时空间
  • 注意:该错误一定出现在SQL线程(即Slave_SQL_Running: No),和IO线程无关

查Created_tmp_disk_tables是否突增

临时文件溢出不是偶发事件,而是持续性压力积累。用状态变量确认趋势:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 执行SHOW GLOBAL STATUS LIKE 'Created_tmp_disk_tables';,记录每秒增量;若稳定 >50次/秒,说明大量查询被迫落盘
  • 对比Created_tmp_tables,算比值:Created_tmp_disk_tables / Created_tmp_tables > 0.1即属异常
  • 重点观察时间点:是否和某次ALTER TABLE、CREATE TABLE ... SELECT或大批次INSERT ... SELECT同步发生?这类DDL/DML在从库回放时会重建临时结构

确认tmpdir和ibtmp1真实占用位置

别只看df -h根分区——MySQL可能把临时文件写到了意想不到的地方:

  • 查实际路径:SELECT @@tmpdir;,常见值有/tmp、/var/tmp、/data/mysql/tmp,对应挂载点要单独df -h
  • 查InnoDB临时表空间:SELECT @@innodb_temp_data_file_path;,默认是ibtmp1:12M:autoextend,它会无限增长直到磁盘满
  • 用lsof +D /path/to/tmpdir确认是不是mysqld进程在往里面狂写(注意:重启前ibtmp1不会缩容,即使删了临时表)

改参数前先做三件事:停SQL线程、清空临时表、验证tmp_table_size与max_heap_table_size是否相等

盲目调参可能让问题更隐蔽:

  • 先停SQL线程:STOP SLAVE SQL_THREAD;,避免新临时表持续生成
  • 手动清理:DROP TEMPORARY TABLE IF EXISTS(如有显式创建)、KILL掉长时间Creating sort index或Copying to tmp table状态的连接
  • 必须验证:SELECT @@tmp_table_size, @@max_heap_table_size; —— 两个值单位是字节,必须完全一致;若不等,MySQL永远按小的那个截断
  • 配置文件中必须并列写两行:tmp_table_size = 268435456和max_heap_table_size = 268435456(即256MB),不能只改一个

真正棘手的点在于:DDL操作(比如ADD COLUMN)在从库回放时,即使主库没报错,从库也可能因ibtmp1已占上百GB而无法分配新段——此时RESET SLAVE无用,STOP SLAVE也救不了,唯一解是重启MySQL释放ibtmp1。但重启前得确保没有长事务卡住binlog位置,否则主从数据会断层。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2173

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1339

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

775

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2952

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4968

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1119

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5231

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4602

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6074

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 183人学习