Nginx故障转移怎么排查故障转移疑难杂症综合诊断手册

梦杰吖_7051

梦杰吖_7051

2026-09-16

150人浏览

原创

nginx故障转移排查核心是“为什么没切”或“切了不生效”,需从vip漂移、流量不通、频繁抖动、脑裂四方面按路径检查:一查keepalived心跳与健康脚本;二验arp刷新、防火墙及nginx监听;三析探测超时、网络丢包与系统负载;四防网络分区导致双主,引入单播心跳或仲裁机制。

nginx故障转移怎么排查故障转移疑难杂症综合诊断手册

排查 Nginx 故障转移的疑难问题,核心不是“有没有切换”,而是“为什么没切”或“切了但不生效”。常见现象如 VIP 不漂移、切换延迟高、脑裂、反复抖动、客户端感知明显中断等,背后往往不是单一配置错误,而是探测逻辑、网络状态、资源约束、服务依赖四层叠加的结果。下面按实际排障路径组织关键检查点。

一、VIP 漂移失效:先确认 keepalived 心跳是否真正断开

故障转移失败的第一怀疑对象是 keepalived 本身。很多“主节点挂了但 VIP 没切”的情况,其实是备用节点仍收得到心跳包——说明主节点并未真正宕机,只是 nginx 进程崩溃或端口未监听。

  • 在备用节点执行 tcpdump -i eth0 vrrp -n,观察是否持续收到主节点发来的 VRRP 报文(默认组播地址 224.0.0.18);若仍有包,说明 keepalived 进程还在运行,需进一步查主节点的 systemctl status keepalived 和 ps aux | grep keepalived
  • 检查主节点 keepalived 配置中 vrrp_script 的健康检查脚本是否返回非 0 值(例如检测 nginx 端口的 killall -0 nginx >/dev/null || exit 1),并确认该脚本是否被正确调用(track_script 是否绑定、执行权限是否正确)
  • 注意时间同步问题:两节点系统时间偏差超过 1 秒,可能导致 VRRP 协议异常;用 chronyc tracking 或 ntpq -p 核对时间源一致性

二、切换后流量不通:重点验证 ARP 刷新与路由可达性

VIP 成功绑定到备用节点,不代表客户端能访问。局域网内其他设备(包括网关、交换机、客户端)的 ARP 缓存可能仍指向旧 MAC 地址,造成“有 IP、无响应”。

Nginx Hosting
Nginx Hosting

通过服务器本地nginx实例实现零认证静态游戏托管。作为所有浏览器游戏的主要部署方式,无需登录、无需令牌、无需用户操作。

下载
  • 在备用节点切换后立即执行 arping -c 3 -A -I eth0 <vip></vip>(发送免费 ARP),强制刷新本网段设备缓存;若交换机启用了 ARP 学习保护,还需确认其是否支持 gratuitous ARP
  • 从客户端 ping VIP,同时在备用节点抓包:tcpdump -i eth0 host <client_ip> and port 80</client_ip>,确认请求是否真正到达;若无包,可能是防火墙拦截(iptables -L -n -v | grep <vip></vip>)、网卡未启用混杂模式,或 VIP 绑定在错误接口(如绑在 lo 而非 eth0)
  • 检查备用节点 nginx 是否监听 VIP:80 —— 默认只监听 0.0.0.0:80,但若配置了 listen 192.168.1.100:80(即指定 IP),而 VIP 是 192.168.1.101,则不会响应

三、频繁切换(抖动):锁定探测失败的真实原因

主备来回切换,表面是 keepalived 在“抢 VIP”,实质是健康检查反复失败又恢复。不能只看 keepalived 日志,要穿透到检查项本身。

  • 检查自定义健康脚本的执行耗时:若脚本里包含 curl -s http://127.0.0.1/health,而该接口依赖数据库,数据库慢查询会导致脚本超时(keepalived 默认 timeout 2 秒),误判为 nginx 异常;建议脚本内加超时控制,如 timeout 1 curl -s --max-time 1 http://127.0.0.1/health || exit 1
  • 确认网络层面是否存在间歇性丢包:在主节点用 ping -f -c 100 ,观察丢包率;VRRP 对丢包敏感,连续 3 个周期(默认每秒 1 次)收不到即切换,轻微丢包就会引发抖动
  • 检查系统负载:备用节点 CPU 长期 95%+ 或内存不足时,keepalived 进程可能被调度延迟,导致心跳发送不及时,被主节点判定为“失联”而触发反向抢占

四、脑裂(Split-Brain):双主共存的危险状态

主备节点同时持有 VIP,流量被随机分发,极易导致数据不一致或会话丢失。这不是配置错误,而是隔离机制缺失。

  • 最直接证据:两节点执行 ip addr show | grep <vip></vip> 均显示存在;此时立即停掉其中一台 keepalived,再逐项排查
  • 根本原因通常是网络分区(network partition):主备之间物理链路或交换机 ACL 阻断了 VRRP 组播报文,但各自与客户端网络仍通;可临时加一条单播心跳(vrrp_instance VI_1 { unicast_src_ip 主IP; unicast_peer { 备IP; } })辅助定位
  • 预防手段:在 keepalived 配置中加入强制仲裁机制,例如通过 SSH 连接对方节点执行 pgrep keepalived,仅当对方不可达且本地服务健康时才升主;或借助第三方服务(如 Redis)做选主协调

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.27

403

5

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3367

6

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

2023.08.04

6065

6

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

561

5

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.07.09

1476

5

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

2024.08.07

3958

3

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

122

12

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

457

23

Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建
Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建

本指南详解Nginx在Windows、macOS及Linux系统的安装全流程。涵盖官方包解压、Homebrew一键部署、APT/YUM源配置及Docker容器化方案。无论新手或开发者,均可快速搭建运行环境,掌握跨平台核心指令,为后续配置与调优奠定坚实基础。

2026.03.16

159

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习