MySQL如何处理由于锁机制引起的复制延迟_优化主从同步策略

千墨同学_9289

千墨同学_9289

2026-04-16

513人浏览

原创

大事务和DDL会卡住从库SQL线程,是因为主库将整个事务(含百万行UPDATE或ALTER TABLE)原子写入binlog,而从库SQL Thread单线程串行回放,必须等该事务完全执行完才能处理后续事件;若事务大、MDL锁冲突、ROW格式binlog解析慢或从库存在长查询争用资源,就会导致Seconds_Behind_Master骤升、Exec_Master_Log_Pos停滞。

mysql如何处理由于锁机制引起的复制延迟_优化主从同步策略

为什么大事务和DDL会卡住从库SQL线程

主库上一个 ALTER TABLE 或百万行 UPDATE 执行完才写入 binlog,而从库的 SQL Thread 是单线程回放——它必须等这个事务完整执行完,才能处理后续所有事务。这不是“慢”,是“堵死”。尤其当主库并发高时,多个大事务排队进 relay log,延迟指数级上涨。

常见错误现象包括:Seconds_Behind_Master 突然跳到几百秒甚至上千秒,SHOW PROCESSLIST 里看到 SQL Thread 长时间处于 Executing 状态,且 Exec_Master_Log_Pos 几乎不动。

  • DDL 操作默认持有元数据锁(MDL),主库执行完才落 binlog;从库回放时仍需获取相同 MDL,若从库上有长查询正在读这张表,就会被阻塞
  • ROW 格式下大事务产生的 binlog 体积巨大,IO 线程拉取快,但 SQL 线程解析+应用慢,磁盘 IO 和 CPU 都可能成瓶颈
  • 从库未关闭 innodb_flush_log_at_trx_commit 或 sync_binlog,导致每条语句都刷盘,进一步拖慢回放速度

如何启用多线程复制加速回放

MySQL 5.7 起支持基于库(database)粒度的并行复制,8.0 支持更细粒度的 write-set 并行。关键不是“开了就行”,而是确认是否真生效。

检查并设置步骤:

  • 确认版本:SELECT VERSION();,低于 5.6.3 不支持原生多线程
  • 开启并行:在从库配置中设 slave_parallel_workers = 4(或更高,但不宜超过 CPU 核数)
  • 确保复制模式兼容:binlog_format = ROW 是前提;若用 GTID,还需 enforce_gtid_consistency = ON
  • 启动后验证:SHOW PROCESSLIST 应出现多个 Worker 线程,且 SHOW SLAVE STATUS\G 中 Slave_SQL_Running_State 显示类似 worker 2 is waiting for an event from coordinator

注意:slave_parallel_type = LOGICAL_CLOCK(5.7 默认)按 commit 时间戳分组事务,对跨库事务效果有限;8.0 推荐改用 WRITESET,需同时开启 binlog_transaction_dependency_tracking = WRITESET。

从库锁争用怎么快速定位和规避

从库延迟不全是复制线程的问题,也可能是它自己被业务查询拖住。比如一个未加索引的 SELECT COUNT(*) FROM huge_table 正在运行,会持有表级锁或严重消耗 IO/CPU,间接卡住 SQL Thread 回放。

MySQL8 CRM Schema Design Expert
MySQL8 CRM Schema Design Expert

面向 CRM 系统的 MySQL 8 数据库模式设计。当用户需要为客户关系管理(CRM)系统设计、评审、优化或生成数据库模式时,应使用此项技能。

下载

实操建议:

  • 从库禁止跑重查询:用 pt-kill 或自定义脚本定期 kill 运行超 30 秒的非复制线程,命令如 pt-kill --busy-time 30 --match-command Query --ignore-command Sleep --kill
  • 检查锁等待:SELECT * FROM performance_schema.data_lock_waits;(需开启 performance_schema 和相关 instrument)
  • 区分用途:明确一台从库只做备份(mysqldump 或 xtrabackup),其他从库专供读请求,避免 FLUSH TABLES WITH READ LOCK 影响同步线程
  • 监控指标联动:把 Threads_running + Innodb_row_lock_time_avg 和 Seconds_Behind_Master 一起看,三者同时飙升,基本可断定是本地锁争用而非复制本身问题

哪些配置项必须调,哪些可以不动

盲目调参反而引发新问题。优先动这三项,其余保持默认更稳:

  • innodb_buffer_pool_size:必须设为物理内存的 70%~80%,否则大量磁盘随机读直接拖垮 SQL 线程
  • slave_parallel_workers:设为 4~8(视 CPU 核心数),但前提是 slave_parallel_type = LOGICAL_CLOCK 或 WRITESET 已启用
  • slave_net_timeout:建议从默认 3600 改为 60,避免网络抖动导致 IO 线程假死、重连耗时过长

慎动项:innodb_flush_log_at_trx_commit 和 sync_binlog 在从库设为 0 确实能提速,但一旦从库宕机,未刷盘事务丢失会导致主从数据不一致,除非你接受“只读从库可丢少量数据”这一前提。

真正容易被忽略的是硬件不对等——从库用 SATA 盘、主库用 NVMe,再怎么调参也追不上。延迟突然变大时,先看 iostat -x 1 输出里的 %util 和 await,比翻日志更快定位根因。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2433

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1459

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

875

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3432

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

5888

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1259

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

6151

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

5322

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

7154

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 193人学习