关键是要用 $upstream_response_time 配合 $upstream_addr 和 $upstream_status 构建可归因日志,精准定位后端节点级性能问题:它精确记录Nginx到上游(如Tomcat)的响应头耗时(毫秒级),多值逗号分隔表重试,值为“-”表示失败,需结合独立 upstream 命名与专属 access_log 验证生效。

要在 Nginx 中有效监控后端集群性能瓶颈,关键不是只看平均响应时间,而是让每次请求都“说出”它经过了哪台机器、耗时多少、是否重试或失败。$upstream_response_time 是实现这一目标的核心变量,配合合理的 log_format 配置,就能把日志变成可分析的性能线索。
明确 $upstream_response_time 的实际含义
这个变量记录的是 Nginx 向上游(如 Tomcat、PHP-FPM、Node.js)发起请求后,到收到响应头为止的时间(单位:秒,精度毫秒,例如 0.042)。它不包含 Nginx 自身处理开销(如 SSL 握手、日志写入、缓存判断),只反映网络传输 + 后端真实处理速度。
- 值为 - 表示该次 upstream 请求未完成(超时、连接拒绝、502/504 等)
- 多个值用逗号分隔(如 "0.018, 0.063"),对应重试机制中各次尝试的耗时
- 仅在使用 proxy_pass / fastcgi_pass / grpc_pass 等指令时生效;静态文件或内部 redirect 不产生值
定义带上下文的 log_format 格式
不能只加一个 $upstream_response_time。必须搭配 $upstream_addr 和 $upstream_status,才能知道“谁、什么时候、成功还是失败、花了多久”。推荐在 http 块中定义如下格式:
log_format upstream_perf '$remote_addr - $remote_user [$time_local] ' '"$request" $status $body_bytes_sent ' '"$http_referer" "$http_user_agent" ' '$upstream_addr $upstream_response_time $upstream_status ' '$request_time $host';
- $upstream_addr 显示实际转发到的 IP:Port(如 10.0.1.5:8080, 10.0.1.6:8080),与 $upstream_response_time 严格一一对应
- $upstream_status 提供对应每次转发的状态码(如 200, 502),便于快速识别失败节点
- $request_time 与 $upstream_response_time 并列,方便对比:若 request_time 远大于 upstream_response_time,说明瓶颈可能在 Nginx 层(如大文件响应、SSL、大量 header 处理)
按后端集群或负载策略区分日志流
如果用了多个 upstream 块(如 api_backend、file_backend)或不同负载算法(least_conn vs ip_hash),应为每组配置独立的 log_format 和 access_log 路径,避免日志混杂难以归因。
- 给每个 upstream 块起有意义的名字(如 upstream api_v2 { ... })
- 在对应 location 中启用专属日志:access_log /var/log/nginx/api_v2_perf.log upstream_perf;
- 如需标记算法类型,可用 map 指令生成自定义变量(如 $lb_strategy),再加入 log_format,便于后续用 grep 或日志系统做聚合分析
验证配置是否真正生效
改完配置后,光 reload 不够,要确认三点:
- 执行 nginx -t 确保语法无误
- 检查日志文件是否开始写入,且字段顺序与 log_format 定义一致
- 发起真实请求(curl 或浏览器访问),观察日志中 $upstream_response_time 是否出现非“-”值;若始终为“-”,检查 proxy_pass 地址是否可达、后端是否正常响应、防火墙或代理链路是否阻断











