如何利用开源工具gh-ost在不中断MySQL在线备份的情况下修改大表

大瑶酱_6770

大瑶酱_6770

2026-10-16

281人浏览

原创

能共存但需规避冲突:gh-ost与mysqldump/xtrabackup可同时运行,前提是避开备份锁、错开高负载窗口、确保binlog可读;mysqldump--single-transaction无直接锁冲突但增i/o压力,xtrabackup不锁表但争抢磁盘io,二者均需检查binlog_format=row、权限不含reload、禁用autocommit=0等配置。

如何利用开源工具gh-ost在不中断mysql在线备份的情况下修改大表

不能直接在运行中的备份流程里跑 gh-ost,但可以共存——前提是避开备份锁、错开高负载窗口、且备份本身不阻塞 binlog 读取。

gh-ost 与 mysqldump / xtrabackup 能否同时运行

能,但不是“无条件并行”。gh-ost 本身不加表级锁(除最后 cut-over 瞬间),但它依赖持续读取 binlog 和频繁 SELECT/INSERT 操作;而备份工具的行为决定了是否冲突:

  • mysqldump --single-transaction:基于 MVCC 快照,与 gh-ost 无直接冲突,但会显著增加 innodb_buffer_pool 压力和磁盘 I/O,容易触发 --max-load 退出(如 Threads_running 暴涨)
  • mysqldump --lock-tables 或 --all-databases:会锁全库或单表,gh-ost 启动即失败(报 Table 't' is locked)
  • Percona XtraBackup:物理备份期间不锁表,但会大量读盘 + 写 backup 文件,若磁盘 IO 已达瓶颈,gh-ost 的 chunk 拷贝可能超时或被 --critical-load 中断

必须检查的 3 个备份相关配置点

漏掉任一,gh-ost 可能在备份中静默失败或拖垮主库:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • binlog_format 必须为 ROW:XtraBackup 不影响 binlog,但 mysqldump 若搭配 --master-data,会强制执行 FLUSH TABLES WITH READ LOCK —— 此时 gh-ost 连接会被阻塞,直到锁释放
  • log_slave_updates=ON(若 gh-ost 连从库):确保从库 binlog 包含所有变更,否则 gh-ost 解析不到主库写入,ghost 表数据滞后
  • 备份用户权限不能包含 RELOAD 或 LOCK TABLES:避免备份脚本意外调用 FLUSH TABLES 类命令,干扰 gh-ost 的连接状态

实际执行时怎么安排时间与参数

核心原则:让 gh-ost 主动让步给备份,而不是硬扛。

  • 备份窗口内,用 --max-load="Threads_running=10" + --critical-load="Threads_running=15" 极限压低 gh-ost 负载,它会自动暂停 chunk 拷贝,只维持 binlog 同步
  • 避免在 pt-online-schema-change 或其他 DDL 工具运行时启动 gh-ost:它们可能建临时表(如 _t_new),与 gh-ost 的 _t_gho / _t_ghc 表名冲突
  • 若备份使用 --master-data=2,务必在 gh-ost 命令中加 --assume-rbr,跳过 STOP/START SLAVE 操作,否则备份的 FLUSH 会卡住 gh-ost 的 slave 控制流

最容易被忽略的隐性冲突点

不是锁表,而是资源争抢下的「慢失败」:

  • gh-ost 默认每秒发起多次 SELECT COUNT(*) FROM t(用于估算进度),而 mysqldump 的 --single-transaction 会拉长事务,导致这些 COUNT 被堵在 innodb_row_lock_waits 队列里,gh-ost 日志显示 Throttling due to load 却查不到明显锁
  • XtraBackup 的 --stream=tar 模式若直连管道压缩(如 | gzip),CPU 占用飙升,MySQL 的 Performance Schema 统计可能误判为「负载过高」,触发 gh-ost 主动退避
  • 所有备份都应禁用 autocommit=0 的客户端设置——gh-ost 内部强制用 SET SESSION autocommit=1,若备份连接未重置该变量,可能污染 gh-ost 的事务行为

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2233

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1359

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

795

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3092

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

5208

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1159

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5471

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4802

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6354

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 187人学习