Redis主从复制主库负载调优_合理配置从库数量避免主库并发复制请求过载

冬枫同学_5746

冬枫同学_5746

2026-04-02

311人浏览

原创

主库被复制请求压垮表现为cpu和网络打满、从库卡在sync/psync:需错峰同步、调大repl-backlog-size、扩容maxclients及ulimit、启用diskless sync并调优内核参数。

redis主从复制主库负载调优_合理配置从库数量避免主库并发复制请求过载

主库 CPU 和网络被打满,INFO replication 显示多个从库卡在 SYNC 或 PSYNC 状态

这是典型主库被复制请求压垮的表现:每次全量同步(SYNC)都会触发一次 bgsave,多个从库同时发起,主库频繁 fork 子进程 + 压缩 RDB + 发送大文件,CPU 和网卡直接飙高。

实操建议:

  • 禁止让多个从库在同一时间发起首次同步——用 redis-cli -h <em>slave_ip</em> -p <em>port</em> CONFIG SET slave-serve-stale-data no 配合错峰上线,或人工控制 SLAVEOF 时间
  • 确认主库启用了 repl-diskless-sync yes,避免磁盘 I/O 成瓶颈;但注意该模式依赖 socket 缓冲区,需同步调大 net.core.wmem_max 和 tcp_wmem
  • 检查 repl-backlog-size 是否过小(默认 1MB),导致从库断连重连时无法走增量同步(PSYNC),被迫降级为全量同步——建议按主库每秒写入量 × 断连容忍秒数 × 2 估算,例如 5MB/s 写入、容忍 60 秒断连,至少设为 repl-backlog-size 60000000

slaveof 指令后主库日志狂刷 Connection with slave <em>ip:port</em> lost

这不是网络问题,而是主库主动拒绝了从库连接——常见于主库设置了 maxclients 限制,而每个从库连接会占用一个 client 连接数,且不计入 client-output-buffer-limit slave 的控制范围。

实操建议:

  • 用 CONFIG GET maxclients 查主库当前上限,再用 CLIENT LIST | grep "flags=s" 统计真实从库连接数,两者相减即为剩余可用连接数
  • 若从库数量 > 5,必须调大 maxclients,否则新从库连不上,老从库也可能因心跳超时被踢出
  • 别只改 maxclients,还要同步检查系统级限制:ulimit -n 必须 ≥ Redis 配置值,否则 Redis 启动时会静默截断

从库数量从 3 增加到 8,主库延迟突增,master_repl_offset 和 slave_repl_offset 差值持续扩大

不是带宽不够,是主库单线程写命令 + 复制缓冲区竞争导致的“复制积压”。Redis 主库靠一个线程串行处理写命令并写入复制缓冲区,从库越多,缓冲区写入越频繁,主线程阻塞风险越高。

实操建议:

  • 启用 repl-diskless-sync-delay 5(单位秒),让主库在收到第一个 PSYNC 请求后等待最多 5 秒,攒一批从库一起做无盘同步,减少 fork 次数
  • 监控 instantaneous_ops_per_sec 和 total_commands_processed 增速,如果写入 QPS 超过 5k,建议停止横向扩从库,改用读写分离中间件(如 redis-shake 或 twemproxy)分流
  • 禁用 tcp-nodelay no(即开启 Nagle 算法),对复制流量有害——必须设为 tcp-nodelay yes,否则小包堆积加剧延迟

从库升级为新主库后,原主库重启连不上,报错 Master is currently unable to SYNC

这是主库重启后未清空自身复制元数据导致的:它仍认为自己是旧主,保留着过期的 run_id 和偏移量,而新主已切换身份,拒绝接受旧主作为从库。

实操建议:

  • 主库重启前,先执行 DEBUG RELOAD 或手动删掉 dump.rdb 和 appendonly.aof(如果 AOF 开启),确保启动时不加载旧复制状态
  • 更稳妥的做法是:主库重启后,立刻执行 REPLICAOF NO ONE 清除所有复制配置,再 REPLICAOF <em>new_master_ip</em> <em>port</em> 重新建立关系
  • 切勿依赖 slave-announce-ip 自动发现——跨机房或容器环境容易解析错 IP,务必显式指定新主地址
从库数量不是越多越好,真正影响主库负载的是「同步时机」和「连接管理」,而不是数字本身。很多人调完 repl-timeout 就以为解决了,其实最常被忽略的是 maxclients 和系统 ulimit 的匹配,以及 diskless sync 的内核参数适配。
PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
什么是中间件
什么是中间件

中间件是一种软件组件,充当不兼容组件之间的桥梁,提供额外服务,例如集成异构系统、提供常用服务、提高应用程序性能,以及简化应用程序开发。想了解更多中间件的相关内容,可以阅读本专题下面的文章。

2024.05.11

649

5

Golang 中间件开发与微服务架构
Golang 中间件开发与微服务架构

本专题系统讲解 Golang 在微服务架构中的中间件开发,包括日志处理、限流与熔断、认证与授权、服务监控、API 网关设计等常见中间件功能的实现。通过实战项目,帮助开发者理解如何使用 Go 编写高效、可扩展的中间件组件,并在微服务环境中进行灵活部署与管理。

2025.12.18

624

18

ThinkPHP中间件机制与请求拦截处理实践
ThinkPHP中间件机制与请求拦截处理实践

本专题围绕 ThinkPHP 中间件体系展开,深入讲解中间件的定义、注册与执行流程。内容包括全局中间件与路由中间件的区别、请求前后处理逻辑、自定义中间件开发以及权限验证与日志处理应用。通过实际案例,帮助开发者掌握中间件在项目中的核心作用与最佳实践。

2026.03.31

438

17

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

5827

5

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.10

2508

6

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

2023.08.10

4198

6

页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

2023.08.14

5936

4

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4529

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

4095

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.8万人学习