如何配置 Nginx 监控后端集群的 max_fails 触发情况并实时告警

冬杰同学_5656

冬杰同学_5656

2026-05-13

776人浏览

原创

Nginx 不直接暴露 max_fails 触发次数,但可通过错误日志分析、OpenResty+Lua 实时统计或 Nginx Plus/Prometheus 获取该指标;核心是监控后端被标记为 down 的时刻与频次,并按业务容忍度设定告警策略。

如何配置 nginx 监控后端集群的 max_fails 触发情况并实时告警

Nginx 本身不直接暴露“max_fails 触发次数”这类运行时指标,但可通过日志、状态接口或 Lua 扩展捕获其实际触发行为,并联动外部系统实现实时告警。关键不是监控参数本身,而是监控它何时真正生效——即后端节点被标记为 down 的时刻和频次。

从错误日志中提取 max_fails 实际触发信号

Nginx 在某个 upstream server 因达到 `max_fails` 被主动摘除时,会在 error log 中记录明确线索: - 出现 `upstream timed out` 或 `connect() failed` 等失败日志(需已配置 `proxy_next_upstream` 启用对应错误) - 后续请求不再打到该节点,且同一时间窗口内同类错误集中爆发

操作建议:

  • 在 http 块中开启带上下文的错误日志:
    error_log /var/log/nginx/upstream_error.log warn;
  • 自定义 log_format 包含 $upstream_addr 和 $upstream_status,便于定位具体 server
  • 用定时脚本(如每 30 秒)扫描日志,统计单位时间内某 IP:PORT 的失败行数
    例如:awk '/192.168.1.10:8080.*502|connect failed/ {c++} END{print c+0}' /var/log/nginx/upstream_error.log
  • 若 60 秒内失败 ≥3 次,且伴随该节点后续无流量,可判定为 max_fails 已触发,立即推送告警

用 OpenResty + Lua 实时感知并上报

开源 Nginx 缺少运行时状态 API,OpenResty 可弥补这一短板:

  • 使用 lua-resty-upstream-healthcheck 模块监听健康检查结果
  • 配合 lua_shared_dict 统计每个 server 最近 60 秒内的失败时间戳(滑动窗口)
  • 在 access_by_lua_block 中判断:若某 server 的失败事件在窗口内 ≥ max_fails,则写入 Redis 或调用 webhook

示例逻辑:

Nginx Reverse Proxy
Nginx Reverse Proxy

配置 Nginx 反向代理,实现域名绑定。用户说“绑定域名”“配置 Nginx”“反向代理”时触发,将域名绑定到指定 IP:端口。

下载
  • 每次 upstream 失败时,记录 ngx.shared.fails:set("server_192.168.1.10", os.time(), 60)
  • 定期遍历字典,对每个 key 统计未过期条目数
  • 达阈值即触发告警,精度可达秒级

借助 Nginx Plus 或 Prometheus 补全指标链

若使用 Nginx Plus,直接启用 status 模块: - 访问 `/status` 接口可获取每个 upstream server 的 `fails` 当前值、`unavailable` 状态及上次 down 时间 - 用 Prometheus 抓取该接口,配合 `nginxplus_upstream_server_fails` 指标设置告警规则 例如:`rate(nginxplus_upstream_server_fails{upstream="backend"}[5m]) > 0.1`(平均每分钟触发超 0.1 次)

若用开源版 + nginx-prometheus-exporter:

  • 需自行扩展 exporter,或通过 stub_status 解析 Active connections 和 Accepted conn 差值间接推断异常波动
  • 更稳妥方式是结合 access log 中 $upstream_addr 变化频率:单请求多次切换 upstream,说明有节点频繁触达 max_fails 边界

告警策略必须匹配业务容忍度

触发告警不等于立刻响应故障,要避免噪音: - 对支付类接口:`max_fails=1 fail_timeout=10s` 触发即告警,需人工介入核查 - 对报表类服务:连续 3 分钟内每分钟都触发 `max_fails` 才告警,过滤单次慢请求干扰 - 告警内容应包含:触发节点 IP、最近 5 条失败日志摘要、当前 upstream 总节点数、fail_timeout 剩余时间

不复杂但容易忽略

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

nginx

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2923

5

前端和后端的区别
前端和后端的区别

前端关注的是用户界面的设计和交互,而后端则注重数据处理和逻辑控制。想了解更多前端后端的相关内容,可以阅读本专题下面的文章。

2024.03.19

7290

13

后端的主要工作内容介绍
后端的主要工作内容介绍

后端是应用程序的服务端部分,负责核心任务,如数据库交互、业务逻辑处理和响应客户端请求。想了解更多后端的相关内容,可以阅读本专题下面的文章。

2024.03.19

6846

10

nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.27

423

5

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

4147

6

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

2023.08.04

7025

6

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

601

5

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.07.09

1516

5

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

2024.08.07

3998

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习