为什么MySQL的General Log开启后会导致系统性能大幅下降?

夏萱君_9596

夏萱君_9596

2026-07-15

690人浏览

原创

general_log写入是同步阻塞操作,每条sql执行前必须完成日志落盘(文件)或表写入(table),无缓冲、不异步,高并发下i/o成瓶颈,导致tps骤降、iowait飙升;file模式触发fsync,table模式全表锁csv写入,二者均不可控;替代方案是slow_query_log+long_query_time=0,仅执行后判定记录,开销更低且更安全。

为什么mysql的general log开启后会导致系统性能大幅下降?

general_log 写入是同步阻塞操作

MySQL 每执行一条语句,只要 general_log 开启,就会立即将完整 SQL 文本、连接 ID、时间戳等写入日志(文件或表),这个动作发生在语句解析和执行前的阶段,且是同步的。它不走异步队列,也不缓冲——意味着每个请求都得等日志落盘(或写入系统表)完成才能继续。在高并发下,I/O 成为瓶颈,大量线程卡在日志写入环节,CPU 空转等待,TPS 断崖式下跌。

FILE 和 TABLE 两种输出方式性能差异极大

虽然 log_output 可设为 'FILE' 或 'TABLE',但两者都不是“轻量级”:

  • FILE 模式:每次写入触发一次 fsync()(尤其在 sync_binlog=1 或日志文件挂载为 data=ordered 的 ext4 下),磁盘随机小写密集,SSD 也扛不住
  • TABLE 模式:日志写入 mysql.general_log 表,该表默认是 CSV 引擎,无索引、无事务、全表锁写入;每条 INSERT 都是一次独立的磁盘追加,同样无法批量合并

实测显示:QPS 2000+ 场景下开启 general_log,响应延迟从 5ms 跳到 200ms+,CPU iowait 占比超 60%。

日志体积爆炸导致 IO 和磁盘空间双重压力

一条简单 SELECT 1 在 general_log 中记录约 150 字节;按每秒 1000 条算,1 小时就生成 500MB+ 日志。这带来两个实际问题:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 磁盘吞吐打满,挤占 InnoDB 刷脏页、redo log 写入等关键路径的 IO 带宽
  • 日志文件滚动不及时(flush-logs 不自动清理旧文件),/var/log/mysql/ 分区被撑爆,MySQL 进程可能因写入失败直接退出
  • 即使配置了 max_relay_log_size 类似机制,general_log 也没有内置轮转逻辑,必须靠外部脚本或 logrotate 手动干预

替代方案:用 slow_query_log + long_query_time=0 更可控

真要捕获全部语句用于分析,slow_query_log 配合 long_query_time=0 是更安全的选择:

  • 它只在语句执行**结束后**才判定是否记录,不阻塞执行流程
  • 支持 log_output='TABLE' 且 mysql.slow_log 是 MyISAM 表,写入开销显著低于 CSV 的 general_log
  • 可配合 log_queries_not_using_indexes=ON 定向抓取低效语句,避免全量噪音

注意:long_query_time=0 在 MySQL 5.7+ 生效,5.6 需设为极小值如 0.000001;且仍需严格控制开启时长——超过 10 分钟就该评估风险。

真正危险的不是“要不要记日志”,而是忘了 general_log 是把双刃剑:它不提供采样、不支持条件过滤、不区分读写、不压缩内容。上线前没压测过 general_log 开启状态的 QPS 曲线,等于没做过容量评估。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2133

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1319

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

755

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2892

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4828

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1099

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5111

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4522

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

5934

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 181人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 289人学习