Nginx 中怎么排查轮询模式下部分节点响应慢拖垮整体集群的故障

浅静君_3207

浅静君_3207

2026-10-13

572人浏览

原创

应重点检查upstream_response_time日志值及fail_timeout机制,确认max_fails是否仅统计连接失败而非响应慢,需结合slow_start或调低proxy_read_timeout触发淘汰,再用nginx-upstream-check-module或vts模块实时监控节点状态,并排查后端自身性能瓶颈。

nginx 中怎么排查轮询模式下部分节点响应慢拖垮整体集群的故障

直接看 upstream 的健康状态和各节点响应时间,重点查慢节点的 upstream_response_time 和是否触发了 fail_timeout 机制。

检查 Nginx 日志里的 upstream 响应详情

Nginx 默认不记录每个 upstream 节点的耗时,需在 log_format 中显式加入变量:

log_format main '$remote_addr - $remote_user [$time_local] '
                 '"$request" $status $body_bytes_sent '
                 '"$http_referer" "$http_user_agent" '
                 'rt=$request_time uct="$upstream_connect_time" '
                 'uht="$upstream_header_time" urt="$upstream_response_time"';

其中 upstream_response_time 是关键——它会按请求经过的节点顺序输出多个值(如 0.002, 0.154, 2.891),最后一个值对应最终成功返回的节点耗时。若某节点频繁出现在末尾且数值明显偏高(比如 >1s),就极可能是拖慢源头。

Nginx Hosting
Nginx Hosting

通过服务器本地nginx实例实现零认证静态游戏托管。作为所有浏览器游戏的主要部署方式,无需登录、无需令牌、无需用户操作。

下载

确认 upstream 配置是否启用了被动健康检查

轮询本身不自动剔除慢节点,必须配合 max_fails 和 fail_timeout 才能实现“慢即失效”:

upstream backend {
    server 192.168.1.10:8080 max_fails=3 fail_timeout=30s;
    server 192.168.1.11:8080 max_fails=3 fail_timeout=30s;
    server 192.168.1.12:8080 max_fails=3 fail_timeout=30s;
}

注意:
- max_fails 统计的是「连接失败或超时」次数,不是响应慢;
- 单纯响应慢(如 5s 返回 200)不会触发踢出,除非加 slow_start 或用商业版/第三方模块(如 nginx-plus 的 slow_start 或开源的 upstream_check_module);
- 若想让慢响应也参与淘汰,可临时把 proxy_read_timeout 设低(如 1s),让慢节点主动超时,从而被 max_fails 捕获。

用 stub_status 或第三方模块实时观察节点状态

启用 stub_status 只能看到总请求数、活跃连接等,看不到各节点权重和失败数。更实用的方式是:

  • 编译安装 nginx_upstream_check_module,开启心跳检测,暴露 JSON 接口查看每个节点的 status(up/down)、rise、fall、check_count;
  • 或使用 nginx-module-vts(Virtual Host Traffic Status),通过网页或 API 查看每个 upstream server 的请求量、响应时间 P95/P99、失败数;
  • 简单验证:用 curl http://localhost/status(vts)或 curl http://localhost/check(check_module),对比各节点的 response_time 和 failed 字段。

排除后端自身问题的常见动作

即使 Nginx 已将慢节点隔离,也要确认是不是后端服务真有问题:

  • 登录该节点,用 curl -w "@format.txt" -o /dev/null -s http://127.0.0.1:8080/health 测真实响应时间(format.txt 包含 time_namelookup/time_connect/time_starttransfer/time_total);
  • 检查该节点 CPU、内存、磁盘 I/O 是否打满,特别是慢查询或 GC 频繁;
  • 比对该节点与其他节点的配置差异:JVM 参数、连接池大小、DB 连接串、缓存策略;
  • 临时将流量全切到该节点(weight=10),复现并抓取其 access log + error log,看是否有特定路径或参数触发慢响应。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.27

403

5

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3447

6

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

2023.08.04

6165

6

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

561

5

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.07.09

1476

5

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

2024.08.07

3958

3

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

122

12

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

477

23

Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建
Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建

本指南详解Nginx在Windows、macOS及Linux系统的安装全流程。涵盖官方包解压、Homebrew一键部署、APT/YUM源配置及Docker容器化方案。无论新手或开发者,均可快速搭建运行环境,掌握跨平台核心指令,为后续配置与调优奠定坚实基础。

2026.03.16

159

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习