Redis哨兵怎么排查在主节点死机后迟迟不触发选举切换故障

雨浩君_8665

雨浩君_8665

2026-10-01

451人浏览

原创

先确认是否进入客观下线(+odown):执行sentinel masters检查flags是否含odown;若仅+sdown,说明未达成quorum共识,需用sentinel sentinels 和sentinel ckquorum验证哨兵连通性与法定票数。

redis哨兵怎么排查在主节点死机后迟迟不触发选举切换故障

主节点死机后哨兵迟迟不选举,大概率不是“慢”,而是卡在某个前置环节没推进下去——先确认是否真进入了客观下线(+odown),再查有没有可用从节点、有没有足够哨兵参与投票。

怎么快速确认是否已进入客观下线

主观下线(+sdown)只是单个哨兵的判断,不触发任何切换;必须看到 +odown 日志才算真正启动故障转移流程。

  • 登录任意一台哨兵,执行 SENTINEL masters,检查输出中 flags 字段是否含 odown(不是 sdown 或空)
  • 若只有 sdown,说明其他哨兵还没达成共识:用 SENTINEL sentinels <master-name></master-name> 查看在线哨兵数,再运行 SENTINEL ckquorum <master-name></master-name> 确认是否满足 quorum 值
  • 常见假象:日志里反复出现 +sdown 但无 +odown → 很可能某台哨兵被防火墙隔离、NTP 时间偏移超 5 秒、或 sentinel monitor 配置未同步(比如新哨兵刚启动不到 30 秒)

为什么 SENTINEL masters 显示 num-slaves=0 或全是 odown

哨兵判定主节点 odown 后,下一步是找活着的从节点来接班。如果 num-slaves 是 0,说明它根本“看不见”任何从节点——不是挑不出,是压根没连上。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 逐台登录每个从节点机器,执行 redis-cli -p 6379 INFO replication,重点核对三行:role:slave、master_link_status:up、master_host 指向当前故障主库
  • 若 master_link_status:down,说明从节点自己早就断开了复制,哨兵会直接跳过它;此时再看 master_last_io_seconds_ago 是否大于 down-after-milliseconds(默认 30000)
  • 检查从节点 Redis 配置:bind 是否绑定了 0.0.0.0(而非仅 127.0.0.1),protected-mode 是否为 no,requirepass 是否配了对应 sentinel auth-pass
  • 用 telnet <slave-ip> 6379</slave-ip> 从哨兵机器直连测试,确认 TCP 层通不通——防火墙拦端口比配置错误更隐蔽

quorum 和哨兵存活数不匹配导致投票卡死

quorum 不是哨兵总数,而是“最少几个哨兵同意才能发起故障转移”。设成 2 却只有 1 台哨兵能通信,SENTINEL ckquorum 会直接报 missing+quorum,后续流程全部冻结。

  • 执行 SENTINEL sentinels <master-name></master-name>,确认返回的哨兵列表是否完整;若某台长期失联,它的 flags 会含 disconnected 或 odown
  • 检查所有哨兵机器的 26379 端口是否双向开放(不仅是入站),且 NTP 时间同步误差
  • 不要只改 sentinel.conf 文件,必须在每台哨兵上执行 SENTINEL monitor <name><ip><port><quorum></quorum></port></ip></name> 强制刷新视图,否则新哨兵可能缓存旧配置
  • 生产环境建议部署 3 或 5 个哨兵(奇数),quorum 设为 2 或 3,避免偶数 quorum 在网络分区时分裂投票

Lettuce 客户端卡在旧连接导致“切换完成但业务没感知”

哨兵日志里已出现 +switch-master,但 Spring Boot 应用仍往旧地址发请求——这不是哨兵没切,是客户端连接池没刷新地址。

  • Lettuce 默认启用 DNS 缓存和连接池地址缓存,对哨兵事件响应迟钝;尤其当配置了短超时(如 timeout=600)时,旧连接 hang 住不释放
  • 验证方式:在应用机器上用 redis-cli -h <old-master-ip> -p 6379 PING</old-master-ip>,若返回 NOAUTH Authentication required 或直接拒绝,说明旧主已降级,问题出在客户端
  • 修复方案:升级 Lettuce 到 6.3+,启用 DynamicRedisClient 或手动监听 __sentinel__:hello 频道;或临时调大 client-output-buffer-limit 防止缓冲区溢出中断连接
  • 注意:Jedis 默认不支持自动重连哨兵,必须配合 JedisSentinelPool 且设置合理 maxWaitMillis

真正卡住选举的,往往不是算法本身,而是网络连通性、配置同步、时间一致性这些底层细节。别急着调 failover-timeout,先确保哨兵能互相说话、能连上从节点、能读到从节点真实的 INFO replication 输出——这三步走不通,后面全是空谈。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

数据库优化 redis

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4209

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3695

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

6652

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

623

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

736

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6162

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1140

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

996

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

5538

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习