Redis主从复制导致连接数暴涨_优化客户端连接池复用连接减少从库压力

小浩姑娘_8174

小浩姑娘_8174

2026-04-26

1015人浏览

原创

根本原因是客户端将从节点视为独立服务端并为每个从节点创建独立连接池。开启读写分离后,jedis/lettuce会主动发现并连接所有从节点,导致连接数激增、从库负载过高;解决关键是禁用客户端拓扑发现,改用代理层统一入口或手动控制连接复用。

redis主从复制导致连接数暴涨_优化客户端连接池复用连接减少从库压力

Redis主从架构下客户端为何会疯狂新建连接

根本原因不是主从复制本身,而是客户端默认把 slave 当成独立节点去连——哪怕你只配了一个 master 地址,只要开启了读写分离(比如 JedisPool + readFrom = SLAVE),客户端就会主动发现所有从节点 IP,并为每个从节点单独建一套连接池。

常见现象:redis-cli -h slave_ip info clients 显示 connected_clients 突增数倍,且大量连接 idle 时间极短;监控里从库 CPU 和网络流量明显高于主库。

  • Spring Data Redis 默认使用 LettuceClientConfigurationBuilder 时,若配置了 ReadFrom.SLAVE_PREFERRED,它会拉取整个拓扑并为每个节点维护独立连接池
  • Jedis 不支持自动拓扑发现,但如果你手动把多个从库地址塞进 JedisPoolConfig,它也会为每个地址新建一个池
  • Lettuce 的 RedisURI 若用 redis://host:port 单点写法,却启用了 StaticMasterSlaveTopologyProvider,同样触发多池行为

如何让客户端复用同一组连接访问所有从库

核心思路:禁止客户端「感知」多个从节点,改由服务端或中间层做负载分发。不是不让读从库,而是不让客户端自己挑从库。

redis-tools
redis-tools

按类别查找Redis命令、检测服务器连接、监控键数量和内存占用,支持离线速查表。

下载
  • 用代理层(如 Redis Proxy、Twemproxy 或自研 LB)统一暴露单个 VIP 或域名,后端转发到健康从库,客户端只连这一个入口
  • Spring Boot 中禁用 Lettuce 自动拓扑发现:设置 spring.redis.lettuce.cluster.refresh.period=0,并显式指定 spring.redis.url=redis://proxy-host:6379
  • 如果必须直连,Lettuce 可用 MasterSlaveServersConfig 配合 ReadFrom.MASTER + 应用层按需选从 —— 但此时你要自己实现 getSlaveConnection() 并复用已有连接,不能每次 new 一个 StatefulRedisConnection
  • 检查是否误开了 spring.redis.lettuce.pool.max-active 过大(比如 200),而实际只需要 20~50;每多一个从节点,这个值就会被乘上节点数

连接池参数调优的关键数值怎么设

不是越大越好,也不是越小越省,关键看你的命令 RT 和并发模型。Letture 默认的 max-active=8 在高并发读场景下极易打满,但盲目调到 200 会导致从库瞬间涌入上千连接。

  • max-active 建议 = (QPS × P99 RT in seconds)× 1.2;例如 QPS=500、P99=20ms → 500 × 0.02 × 1.2 ≈ 12
  • min-idle 设为 max-active 的 20%~30%,避免冷启动时反复创建连接
  • max-wait 别设成 -1(无限等待),建议 100~300ms,超时直接报错比卡住线程更可控
  • 务必关闭 test-on-borrow(Lettuce 对应 validateConnectionOnCreate),它会让每次取连接都发 PING,加重从库负担

验证是否真正在复用连接

最直接的办法不是看应用日志,而是抓包或查 Redis 实例本身的状态。

  • 在从库执行 client list,过滤出你的客户端 IP,观察 addr 字段是否只有少量 distinct IP:port 组合(理想是 1~3 个),而不是几十上百个
  • 用 tcpdump -i any port 6379 -w redis.pcap 抓包后用 Wireshark 查看 TCP 握手次数 —— 优化后应明显少于部署前
  • Lettuce 可开启 logging.level.io.lettuce.core=DEBUG,搜索日志中 Creating connection to 出现频次,正常应只在初始化或重连时出现,而非每次操作
  • 注意:Spring Boot Actuator 的 /actuator/health 或 /actuator/metrics 不反映真实连接数,它们只统计连接池内部状态,不包含底层 socket 数量

真正难处理的是那些隐式触发拓扑刷新的场景,比如 DNS 轮询、K8s Service Endpoint 变更、或者 Lettuce 的 PeriodicRedisClusterTopologyRefresh 被意外启用 —— 这些不会报错,但会悄悄重建连接池。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

redis

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4569

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

4115

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

7692

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

643

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

756

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

7642

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1160

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1136

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6658

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习