如何通过配置my.cnf实现MySQL多从库的并行复制加速

千婷君_3604

千婷君_3604

2026-09-07

912人浏览

原创

mysql 5.7并行复制需同时配置slave_parallel_type=logical_clock和slave_parallel_workers>0才生效,仅设workers无效;默认database模式不支持单库并行。

如何通过配置my.cnf实现mysql多从库的并行复制加速

直接结论:MySQL 从库的并行复制能力由 slave_parallel_workers 和 slave_parallel_type 决定,不是靠“多从库”本身提速;但多个从库可分摊主库压力,需各自独立配置并行参数才能真正加速同步。

为什么改 my.cnf 才算真正生效

动态设置(如 SET GLOBAL slave_parallel_workers = 8)只在当前实例生命周期内有效,MySQL 重启后会丢失。生产环境必须写入 my.cnf,否则每次故障恢复或滚动重启都会退回到单线程复制状态。

常见错误现象:明明执行过 SET GLOBAL,SHOW SLAVE STATUS 里也看到 Workers_running: 8,但一重启就变回 0 —— 就是因为没落盘到配置文件。

实操建议:

  • 所有从库的 [mysqld] 段必须显式声明 slave_parallel_type,不能依赖默认值(5.7+ 默认是 DATABASE,但该模式在单库场景下完全不并行)
  • slave_parallel_workers 建议设为 CPU 逻辑核数的 2–4 倍,但不超过 16(过高反而因线程调度开销拖慢)
  • 必须同时启用 relay_log_info_repository = TABLE 和 master_info_repository = TABLE,否则并行复制无法持久化元数据,崩溃后可能丢事务

5.7+ 推荐用 LOGICAL_CLOCK 模式

slave_parallel_type = LOGICAL_CLOCK 是 MySQL 5.7 引入的真正实用的并行方案,它不依赖数据库拆分,而是基于主库的组提交(group commit)信息判断事务间无依赖关系,从而安全并行。

容易踩的坑:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 主库未开启组提交优化,从库即使配了 LOGICAL_CLOCK 也几乎无法并行 —— 必须在主库加 binlog_group_commit_sync_delay = 100 和 binlog_group_commit_sync_no_delay_count = 10
  • 如果主库是 MySQL 5.6 或更老版本,LOGICAL_CLOCK 会自动降级为 DATABASE,此时只有跨库写入才有效,单库大表写入仍卡死
  • slave_preserve_commit_order = 1 必须开启,否则高并发下可能出现从库事务顺序错乱(尤其涉及外键或触发器时)

8.0+ 可选 WRITESET,但主库必须配合

MySQL 8.0 的 WRITESET 并行复制能实现事务级并行(哪怕全在一个库、一张表),但它的前提是主库生成 write-set hash —— 这需要主库明确配置三项参数:

  • binlog_transaction_dependency_tracking = WRITESET
  • transaction_write_set_extraction = XXHASH64
  • binlog_transaction_dependency_history_size = 25000

注意:slave_parallel_type 在从库上仍要设为 LOGICAL_CLOCK(不是 WRITESET),因为 WRITESET 是主库计算、从库消费的机制,从库配置项里没有 WRITESET 类型。

性能影响:WRITESET 对主库 CPU 有额外开销(每事务多一次哈希计算),若主库已满载,不建议强行开启;且对无主键表、大 BLOB 字段等场景,write-set 计算可能失效,退化为逻辑时钟模式。

多个从库 ≠ 自动并行,每个都要单独调参

“多从库”只是横向扩展读能力,每个从库仍是独立复制通道。如果 3 个从库都用默认配置(slave_parallel_workers = 0),它们全在单线程排队,总延迟反而更高(资源争抢 + 网络带宽挤占)。

关键点:

  • 每个从库的 server_id 必须全局唯一,否则主库 binlog event 会被跳过或重复发送
  • 不同从库可以设不同 slave_parallel_workers 值,比如高配从库设 12,低配设 4,但不要盲目拉齐
  • 监控时要看每个从库的 Seconds_Behind_Master 和 Slave_SQL_Running_State(是否显示 Worker thread …),而不是只看主库的 SHOW PROCESSLIST

最容易被忽略的是:从库的磁盘 I/O 和 innodb_buffer_pool_size 必须匹配其并行线程数。8 个 worker 同时刷脏页,若 buffer pool 只有 2G,会导致大量物理读,反而比单线程还慢。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3763

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

811

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

989

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5561

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2543

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5560

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7261

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

990

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

872

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 172人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 275人学习