如何通过MySQL慢查询日志定位备份性能瓶颈_分析磁盘I/O等待事件

老明君_6089

老明君_6089

2026-05-16

559人浏览

原创

mysql慢查询日志不记录xtrabackup等物理备份的i/o操作,仅捕获mysqldump等工具执行的慢sql;需结合performance_schema和iostat定位真实i/o瓶颈。

如何通过mysql慢查询日志定位备份性能瓶颈_分析磁盘i/o等待事件

如何确认慢查询日志是否真在记录备份相关操作

MySQL 慢查询日志(slow_query_log)默认只记录 SELECT、INSERT、UPDATE、DELETE 等客户端发起的 SQL 语句,而物理备份(如 mysqldump 或 mysqlpump)产生的查询会被记录,但逻辑备份工具本身不触发慢日志;XtraBackup 等物理备份工具完全绕过 SQL 层,其 I/O 行为根本不会出现在慢日志里。

所以第一步必须明确:你看到的“备份慢”,到底是备份工具执行 SQL 导致的慢(比如 mysqldump --single-transaction 在大表上启事务卡住),还是磁盘 I/O 本身拖慢了备份进程(比如 XtraBackup 读取 ibdata1 时被系统 I/O 压垮)。

实操建议:

  • 检查 slow_query_log 是否开启,且 long_query_time 设得足够低(例如 0.1),否则备份中那些“不算慢但很耗时”的查询会被忽略
  • 对 mysqldump 类工具,在命令中加 --log-error=backup.err 并配合 --verbose,观察是否卡在某个 SELECT 或 SHOW CREATE TABLE
  • 用 pt-query-digest 分析慢日志时,加 --filter '$event->{arg} =~ m/^(SELECT|SHOW)/i' 过滤出备份期间的典型语句,别被管理语句干扰

为什么 slow_query_log 里查不到 I/O 等待,得看 performance_schema

慢查询日志只告诉你“这条 SQL 执行了 12 秒”,但不告诉你这 12 秒里有 11.8 秒花在等待磁盘读——这是 performance_schema 的职责。特别是 events_waits_summary_global_by_event_name 和 file_summary_by_instance 这两张表,能直接定位到哪个文件(如 /var/lib/mysql/ibdata1)或哪类 I/O(如 wait/io/file/innodb/innodb_data_file)在拖慢整体节奏。

常见错误现象:备份时 SHOW PROCESSLIST 显示线程状态是 Copying to tmp table 或 Sending data,但 CPU 使用率很低,top 看 %wa 却长期高于 60%——这就是典型的磁盘 I/O 等待,和慢日志无关。

实操建议:

  • 确保 performance_schema 已启用(performance_schema=ON),且关键消费者已打开:UPDATE setup_consumers SET ENABLED='YES' WHERE NAME LIKE 'events_waits%';
  • 备份前执行一次 TRUNCATE TABLE performance_schema.events_waits_summary_global_by_event_name;,避免历史噪音干扰
  • 备份过程中运行:
    SELECT EVENT_NAME, COUNT_STAR, SUM_TIMER_WAIT/1e9 AS time_s FROM performance_schema.events_waits_summary_global_by_event_name WHERE EVENT_NAME LIKE 'wait/io/file/innodb%' AND SUM_TIMER_WAIT > 0 ORDER BY SUM_TIMER_WAIT DESC LIMIT 5;
    重点关注 innodb_data_file 和 innodb_log_file 的等待时间

磁盘 I/O 瓶颈的三个典型信号与对应验证方式

不是所有 I/O 高都等于瓶颈。真正影响备份性能的,是随机读放大、吞吐饱和或延迟突增。这三个信号在不同层级表现不同,需要交叉验证。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

使用场景:XtraBackup 全量备份时耗时从 25 分钟涨到 1 小时,iostat -x 1 显示 %util 接近 100%,但 await 只有 3ms——这说明设备没堵死,可能是队列深度或并发策略问题;若 await 超过 20ms 且 r_await 显著高于 w_await,才更可能是磁盘响应能力不足。

实操建议:

  • 看内核层:用 iostat -xmt 1 观察 r/s、w/s、rkB/s、wkB/s,对比备份前后数值。SSD 上 avgqu-sz 长期 > 4 通常意味着 I/O 请求积压
  • 看 MySQL 层:查 INFORMATION_SCHEMA.INNODB_METRICS 中 log_writes、buffer_pool_reads、buffer_pool_read_requests,计算缓存命中率(1 - buffer_pool_reads/buffer_pool_read_requests)。低于 95% 时,备份中大量物理读会加剧 I/O 压力
  • 看文件系统层:用 lsof -p $(pgrep mysqld) | grep -E '\.ibd|ibdata|ib_logfile' | wc -l 确认备份是否被迫读取大量冷数据文件;若数字远大于当前活跃表数量,说明 buffer pool 太小或预热不足

备份参数与 I/O 行为的隐式耦合关系

很多备份参数表面看是控制并发或压缩,实际会剧烈改变 I/O 模式。比如 mysqldump --skip-lock-tables --single-transaction 在大事务中可能引发长 rollback segment 扫描,间接导致大量 undo log 读;xtrabackup --parallel=4 不是简单开 4 个线程,而是让每个线程按 chunk 读取 ibd 文件,chunk 大小由 innodb_page_size 决定,最终体现为随机读还是顺序读,取决于表空间碎片程度。

性能影响常被忽略的一点:启用 innodb_buffer_pool_dump_at_shutdown 后,备份前 MySQL 关闭会 dump 缓存热点页,若此时启动备份,两个高 I/O 操作叠加,iowait 会雪崩式上升。

实操建议:

  • XtraBackup 加 --throttle=100(单位 IOPS)比单纯调 --parallel 更可控,尤其在混部环境
  • mysqldump 避免用 --opt(默认含 --extended-insert),它会让单条 INSERT 包含上千行,内存压力大且生成临时文件多;改用 --skip-extended-insert + --net_buffer_length=262144
  • 备份窗口内禁用 innodb_buffer_pool_dump_now 和 innodb_buffer_pool_load_now,防止 buffer pool 主动刷盘干扰

真正的瓶颈往往藏在「备份工具没报错、MySQL 没告警、iostat 数值看起来还行」的中间地带——这时候得把 performance_schema 的等待事件、iostat 的细分指标、以及备份命令的实际 I/O 模式三者对齐,缺一不可。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

mysql 性能瓶颈

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2333

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1419

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

835

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3272

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

5568

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1219

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5831

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

5062

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6774

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 190人学习