Nginx Java 部署怎么排查后端应用频繁 Full GC 导致的 Nginx 504 错误

胖敏酱_7138

胖敏酱_7138

2026-09-11

350人浏览

原创

Nginx 不执行 GC,504 是因后端 Java Full GC 导致 STW,使 Nginx 在 proxy_read_timeout 内收不到响应头而断连;需通过 Nginx error.log 定位超时时间窗口,再反向关联 JVM GC 日志、jstat 和 jstack 确认 STW;临时摘流、合理调优超时与健康检查,并改用 G1 GC 及排查内存泄漏。

nginx java 部署怎么排查后端应用频繁 full gc 导致的 nginx 504 错误

Nginx 本身不执行 GC,所谓“Nginx 因 Full GC 报 504”其实是后端 Java 应用在长时间 STW(Stop-The-World)期间无法写入响应头,导致 Nginx 在 `proxy_read_timeout` 内收不到任何数据而主动断连。排查关键在于**用 Nginx 日志做时间锚点,反向关联 Java 进程的真实 GC 行为**。

看 Nginx 日志找“GC 时间窗口”

不要只扫 access.log,重点盯 error.log 中集中出现的超时信号:

  • 大量 upstream timed out (110: Connection timed out) while reading response header from upstream:说明连接已建好、请求已发,但后端连响应头都没返回——这是 STW 最典型的外在表现
  • 504 状态码在某几分钟内陡增,且无伴随 connection refused 或 no live upstreams:排除服务宕机或端口未监听,指向“活着但卡住”
  • 同一 upstream 地址失败高度集中(比如 10.0.1.23:8080 在 14:22–14:23 出现 47 次超时):立刻锁定该实例,暂停流量,准备查它的 JVM

查 Java 实例确认 GC 停顿

登录对应服务器,用时间戳对齐法验证是否真被 GC 卡住:

  • 从 Nginx access.log 提取故障时刻,例如:grep "504" /var/log/nginx/access.log | grep "14:22" | head -5
  • 去该 Java 进程的 GC 日志里查同一秒级时间点:grep "14:22:15" /var/log/app/gc.log,重点关注 Pause、Full GC、G1 Evacuation Pause 及其耗时(如 Pause Young (G1 Evacuation Pause) 1287.3ms)
  • 用 jstat -gc 1000 5 实时观察:若 FGCT(Full GC 次数)突增,或 GCT(总 GC 时间)在 1 秒内飙升 >500ms,基本坐实

抓线程快照判断是否 STW 中

GC 停顿时,几乎所有业务线程会卡在 RUNNABLE 状态但无实际堆栈推进:

java-api-doc-generator
java-api-doc-generator

分析 Java Spring Boot 后端 Controller 代码,自动生成 Markdown 格式的接口文档。当用户说“生成 Java 接口文档”、“生成 API 文档”、“从 Spring 代码生成文档”时触发。

下载
  • 在故障窗口期(如 14:22:15±10 秒)执行:jstack -l > thread_$(date +%H%M%S).dump
  • 打开 dump 文件,搜索 java.lang.Thread.State: RUNNABLE,若大量线程堆栈停留在 Unsafe.park、VMThread 或完全空白,就是 STW 正在发生
  • 对比非故障时段的 dump,若此时线程普遍有清晰的业务方法调用链(如 UserService.getUser()),则进一步佐证是 GC 导致的假死

快速缓解与根治协同做

不能只等 GC 调优生效,要同步控制影响面:

  • 临时摘流:在 Nginx upstream 中对该节点加 down,或 K8s 中调高 readinessProbe 的 failureThreshold,避免健康检查误判下线
  • 延长超时但不盲目:把 proxy_read_timeout 提到 120–300 秒,同时必须设 proxy_buffering off 和 proxy_buffer_size 128k,否则缓冲区满会提前断连
  • 让健康检查“感知 GC”:在 /actuator/health 中加入逻辑,若最近 60 秒 Full GC 次数 ≥ 3,主动返回 503,触发 Nginx 自动剔除
  • 根治聚焦 JVM 和代码:禁用 Parallel GC,改用 -XX:+UseG1GC -XX:MaxGCPauseMillis=200;用 jmap -histo:live 对比对象增长,重点查 byte[]、缓存类、未关闭的流

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

nginx java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2703

5

前端和后端的区别
前端和后端的区别

前端关注的是用户界面的设计和交互,而后端则注重数据处理和逻辑控制。想了解更多前端后端的相关内容,可以阅读本专题下面的文章。

2024.03.19

6830

13

后端的主要工作内容介绍
后端的主要工作内容介绍

后端是应用程序的服务端部分,负责核心任务,如数据库交互、业务逻辑处理和响应客户端请求。想了解更多后端的相关内容,可以阅读本专题下面的文章。

2024.03.19

6306

10

java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

11437

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

8542

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

7352

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1224

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

988

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1456

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习