判断5xx占比是否危险需看持续升高、集中环节及伴随异常;应规范nginx日志格式使$status固定为首字段;用awk按小时统计并计算占比,超2%或翻倍即预警;结合upstream_status定位真实故障点;需趋势分析、error.log和request_time交叉验证。

看 5xx 占比本身不难,难的是判断这个占比“是否真的危险”。真正影响稳定性的,不是某次突增,而是占比是否在持续升高、是否集中在特定环节、是否伴随其他异常信号。
先确保日志格式能准确提取状态码
默认 combined 格式里 `$status` 位置不固定,用 `awk '{print $9}'` 容易错位。推荐在 nginx.conf 中明确定义:
log_format stable '$status | $remote_addr [$time_local] "$request" $body_bytes_sent "$http_referer" "$http_user_agent" $request_time $upstream_response_time';这样 `$status` 永远是第一字段,后续统计不会因 UA 或引号出错。
快速算出当前 5xx 占比并识别突增时段
一行命令就能跑出带时间维度的分布:
- 按小时统计 5xx 数量:
awk '$1 ~ /^5[0-9]{2}$/ {gsub(/\[/, "", $2); print substr($2, 1, 13)}' /var/log/nginx/access.log | sort | uniq -c - 计算最近一小时 5xx 占比:
awk '{total++} $1 ~ /^5[0-9]{2}$/ {err++} END {printf "%.2f%\n", err/total*100}' /var/log/nginx/access.log - 重点关注:单小时占比超过 2%、或较前 24 小时均值翻倍以上,就是明确预警信号
不能只看占比数字,要结合 upstream_status 看真实故障点
5xx 是表层结果,关键得知道是谁返回的:
- `$status=502` 且 `$upstream_status="-"` → Nginx 根本没连上后端(端口关了、防火墙拦了、DNS 失败)
- `$status=502` 且 `$upstream_status="500"` → 后端应用活着,但自己崩了
- `$status=504` 且 `$upstream_status="-"` → 后端响应超时,要查 `proxy_read_timeout` 和后端实际耗时是否匹配
- 如果 `$upstream_status` 大量为 `503`,说明后端主动限流或健康检查失败,不是 Nginx 的问题
交叉验证才能确认稳定性是否退化
单次占比只是快照,必须叠加时间趋势和其他日志线索:
- 对比最近 7 天每日 5xx 率,画折线图——阶梯式上升比单次毛刺更危险
- 查对应时段的 error.log,搜 `upstream timed out`、`Connection refused`、`no live upstreams`
- 看 `request_time` 分布:如果 5xx 请求普遍耗时 > 5s,大概率是后端慢或阻塞,而非宕机
- 观察日志时间戳是否延迟:若 error.log 里的时间比系统时间晚 3 秒以上,说明 I/O 已过载,部分错误可能丢失











