MySQL如何在不停机时备份InnoDB大表

落杰酱_9486

落杰酱_9486

2026-08-29

587人浏览

原创

对单个innodb大表执行mysqldump --single-transaction不安全,因依赖mvcc快照且易被长事务阻塞、ddl操作导致快照失效;真正可靠的是percona xtrabackup物理备份。

mysql如何在不停机时备份innodb大表

mysqldump --single-transaction 对大表真的安全吗

对单个 InnoDB 大表执行 mysqldump --single-transaction 看似“热”,但实际极易卡住或失败。它依赖 MVCC 快照,而快照建立前会等待所有活跃事务结束——如果备份开始时恰好有长事务(比如一个未提交的 UPDATE 或 DELETE),mysqldump 就会挂起,直到该事务超时或被 kill。

更隐蔽的问题是:大表导出耗时长,期间若发生 DDL(如 ALTER TABLE),快照即失效,导出内容可能结构错乱、数据缺失,甚至中断报错 ERROR 2013 (HY000): Lost connection to MySQL server during query。

  • 必须确认当前无长事务:SELECT * FROM information_schema.INNODB_TRX WHERE TIME_TO_SEC(NOW()) - TIME_TO_SEC(TRX_STARTED) > 60;
  • 备份窗口内禁止任何 DDL 操作,包括 DROP、RENAME、TRUNCATE
  • --single-transaction 仅对 InnoDB 表生效,若该库混用 MyISAM,需加 --skip-lock-tables,但风险自担

Percona XtraBackup 是唯一靠谱的物理热备方案

真正支持不停机备份 InnoDB 大表的,只有 xtrabackup 这类物理层工具。它不走 SQL 层,而是直接读取 ibdata1、.ibd 和 redo log,配合 checkpoint 定位一致性点,全程不阻塞写入。

注意:它不是“一键完事”。备份后必须执行 --prepare 才能用于恢复——这步会回放未提交事务、清理脏页,否则恢复必报错 Tablespace is not empty 或启动失败。

  • 全量备份命令:xtrabackup --backup --target-dir=/backup/full_$(date +%F)
  • 准备备份:xtrabackup --prepare --target-dir=/backup/full_$(date +%F)
  • 若启用了 innodb_file_per_table=ON,可单独备份某张大表:xtrabackup --backup --tables="^mydb\.big_table$" --target-dir=/backup/big_table
  • 备份过程会占用大量 I/O 和磁盘空间,建议在低峰期运行,并监控 iostat -x 1

直接复制 .ibd 文件?只在极小概率下可行

有人想跳过工具,直接 cp /var/lib/mysql/mydb/big_table.ibd /backup/。这只有在同时满足以下全部条件时才可能成功:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 该表启用独立表空间:SHOW CREATE TABLE big_table 中含 ROW_FORMAT=COMPACT 且无 CREATE TABLE ... TABLESPACE
  • MySQL 已执行 FLUSH TABLES big_table FOR EXPORT;(生成 .cfg 元数据文件)
  • 复制后立即执行 UNLOCK TABLES;,否则表被锁死
  • 恢复时必须先 CREATE TABLE 占位,再 DISCARD TABLESPACE,再 COPY + IMPORT TABLESPACE

漏掉任意一步,恢复时就会报 Tablespace for table 'mydb/big_table' exists. Please DISCARD the tablespace before IMPORT 或数据校验失败。这不是常规操作,而是应急兜底手段。

为什么不能用 mydumper 替代 xtrabackup 备大表

mydumper 是并行逻辑导出工具,比 mysqldump 快,但它仍是 SQL 层导出,本质没脱离 --single-transaction 的限制。对单张百 GB 级别的 InnoDB 表,它依然要拉一次全表扫描、生成海量 INSERT 语句、消耗大量内存和临时空间。

实测中常见问题:

  • 导出进程 OOM 被系统 kill(尤其 -t 8 多线程时)
  • 生成的 SQL 文件单个超 50GB,mysql 导入时频繁断连、字符集解析错误
  • 无法保证跨表外键约束的一致性(除非加 --serializable,等于变相锁表)
  • 不记录 binlog 位点,无法做精确时间点恢复

真正的大表(>50GB)、高并发写入场景,mydumper 只能作为辅助验证手段,不能替代 xtrabackup。

最易被忽略的点:无论用哪种方式,备份前必须确认 autocommit=1。如果客户端连接里手动开了事务却忘了 COMMIT,--single-transaction 会静默失败,而 xtrabackup 则会在 --prepare 阶段报错 Log block checksum mismatch——此时已无法补救。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

1993

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1239

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

715

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2612

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4308

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1019

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

4571

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4122

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

5314

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 176人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 279人学习