为什么MySQL主从复制在大并发写入下会产生断层?

星墨酱_9622

星墨酱_9622

2026-07-26

982人浏览

原创

根本原因是sql thread单线程串行回放,无法匹配主库并发写入速度;mysql 5.6起支持基于库的并行复制,5.7+需配置slave_parallel_workers>0且slave_parallel_type='logical_clock',8.0推荐writeset,同时必须开启slave_preserve_commit_order=on以保障一致性。

为什么mysql主从复制在大并发写入下会产生断层?

SQL Thread 单线程串行回放是根本原因。

主库的并发写入在 binlog 中是按事务提交顺序追加记录的,但这些事务本身可能是高度并行的。从库的 SQL Thread 只能一条一条读取 relay log 并执行,无法还原主库的并行性。当主库每秒产生几十甚至上百个事务时,SQL Thread 的单点处理能力就成了瓶颈,导致中继日志堆积、Seconds_Behind_Master 持续增长,最终表现为“断层”——即从库数据明显落后于主库,且延迟不是偶发抖动,而是持续扩大。


SQL Thread 为什么不能并行?

MySQL 5.6 引入了基于库(database)的并行复制,8.0 支持基于 writeset 的真正并行回放,但默认仍关闭或受限:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • slave_parallel_type = DATABASE:只在不同库之间并行,同一库内仍串行;业务若集中在单库(如 test_db),毫无改善
  • slave_parallel_type = LOGICAL_CLOCK(MySQL 5.7+):依赖 binlog_group_commit_sync_delay 和组提交机制,但对非组提交事务无效
  • slave_parallel_workers > 0 必须配合 slave_preserve_commit_order = ON,否则可能破坏事务一致性

常见误配:slave_parallel_workers = 4 但没设 slave_parallel_type,实际仍走单线程。


主库高并发直接加剧断层的三个技术点

  • binlog_format = STATEMENT 在复杂语句下可能触发锁等待或函数不安全重放,进一步拖慢 SQL Thread
  • sync_binlog = 1 + innodb_flush_log_at_trx_commit = 1 虽保证主库安全性,但也放大主库吞吐与从库回放能力的差距
  • 大事务(如批量 UPDATE 或 DELETE)会独占 SQL Thread 数秒甚至分钟,阻塞后续所有小事务,形成“长尾延迟”

示例:主库执行一条更新百万行的 UPDATE user SET status=1 WHERE created_at ,该事务在 <code>binlog 中是一条完整事件,从库必须等它执行完才能继续——期间所有新同步来的事务都在排队。


容易被忽略的硬件与配置放大效应

  • 从库磁盘 I/O 性能差于主库时,relay log 写入或 SQL Thread 执行 DML 的刷盘速度直接受限
  • innodb_buffer_pool_size 设置过小,导致大量页需要从磁盘读取,SQL Thread 频繁等待 I/O
  • read_only = ON 是安全前提,但若误开 super_read_only = OFF,人为写入会污染从库状态,使复制中断后难以恢复

真正起作用的优化不是调大 slave_parallel_workers,而是先确认 SHOW SLAVE STATUS\G 中的 Retrieved_Gtid_Set 和 Executed_Gtid_Set 是否一致、Slave_SQL_Running_State 是否卡在 “Reading event from the relay log” —— 这些才是判断断层根源的第一手信号。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2033

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1259

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

735

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2692

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4468

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1039

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

4731

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4242

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

5494

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
mysql8主从复制原理底层详解
mysql8主从复制原理底层详解

共1课时 | 702人学习

SQL优化与排查(MySQL版)
SQL优化与排查(MySQL版)

共26课时 | 3.2万人学习