Nginx 中怎么排查 worker 进程因内存越界触发操作系统 OOM 杀掉故障

酷雪大大_1633

酷雪大大_1633

2026-10-27

300人浏览

原创

先执行dmesg -T | grep -i "killed process"确认OOM Killer杀进程的硬证据,再比对Nginx error.log中"exited on signal 9"及"upstream prematurely closed connection"时间点,结合ps aux --sort=-%mem和/proc/PID/smaps验证worker内存异常增长。

nginx 中怎么排查 worker 进程因内存越界触发操作系统 oom 杀掉故障

直接看内核日志找“被杀证据”,再比对 Nginx 日志和进程状态,就能快速确认是不是 worker 进程因内存越界被 OOM Killer 干掉。

查 dmesg 确认是否真被 OOM 杀掉

这是最硬的证据,不能只看 Nginx 自己的日志:

  • 运行 dmesg -T | grep -i "killed process",重点找含 nginx、worker 或具体 worker PID 的行,例如:
    "Killed process 12345 (nginx) total-vm:8901234kB, anon-rss:3845678kB"
  • 如果输出里有时间戳,并且和故障发生时间吻合,基本就是 OOM 导致的
  • 补充查 /var/log/syslog 或 /var/log/messages,搜索 "Out of memory: Kill process",交叉验证

对照 Nginx error.log 找同步异常信号

Nginx 不会写“OOM”,但会留下被杀后的痕迹:

Nginx Hosting
Nginx Hosting

通过服务器本地nginx实例实现零认证静态游戏托管。作为所有浏览器游戏的主要部署方式,无需登录、无需令牌、无需用户操作。

下载
  • 在 error.log 中搜索 "exited on signal 9" 或 "Killed",signal 9 就是 kill -9,通常对应 OOM 终止
  • 注意区分:"exited with code 0" 多是正常 reload;而 "exited on signal 9" + 时间点匹配 dmesg,就是强关联
  • 同一时刻若还集中出现 "upstream prematurely closed connection"(不是 connection refused),说明后端 worker 消失得非常突然,也符合 OOM 特征

看实际内存占用和增长趋势

光看“有没有被杀”不够,还要确认“为什么被杀”:

  • 用 ps aux --sort=-%mem | head -10 查 RSS 最高的进程,确认是不是 nginx worker,以及是否持续上涨(比如从 200MB 涨到 4GB)
  • 对某个高 RSS 的 worker,执行 cat /proc/PID/smaps | awk '/^Rss:/ {sum += $2} END {print sum " kB"}',看真实物理内存使用
  • 如果是长连接场景(如 WebSocket),重点关注 Send-Q/Recv-Q 堆积 和 连接数是否接近 worker_connections 上限,堆积会导致缓冲区内存暴涨

临时防护与定位方向建议

确认是 OOM 后,先稳住服务,再深挖根因:

  • 给 nginx worker 加资源限制:在 systemd service 文件中设 MemoryMax= 或调整 /proc/sys/vm/overcommit_memory
  • 检查是否有模块或配置引发内存泄漏:比如开启 debug 日志后大量出现 "pool alloc"、"http cleanup add";或错误使用 map、geo 指令导致哈希表无限膨胀
  • 压测或高峰时段用 pmap -x PID 或 gcore 抓内存快照,分析大内存块归属(如 anon-rss 高但 file-rss 低,说明是堆分配而非文件缓存)

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

nginx 操作系统

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
视频服务器配置参数有哪些
视频服务器配置参数有哪些

视频服务器配置参数有处理器、内存、存储、视频编解码器、网络接口、视频输入输出接口、操作系统、安全性、环境适应性和成本。在搭建视频服务器时,需要根据实际需求和预算,合理选择这些参数,以实现高性能、高稳定性和低成本的目标。

2023.10.17

4880

11

linux的操作系统介绍
linux的操作系统介绍

Linux是一个灵活、稳定、安全的操作系统,适用于各种不同的应用场景,从个人电脑到服务器和嵌入式系统。想了解更多Linux的相关内容,可以阅读本专题下面的文章。

2024.03.20

3806

12

Linux操作系统的主要用途
Linux操作系统的主要用途

Linux操作系统用途广泛,包括:服务器运营,软件开发,科学研究和教育,嵌入式系统,以及个人电脑和笔记本电脑。想了解更多Linux的相关内容,可以阅读本专题下面的文章。

2024.03.21

6739

8

linux操作系统的作用
linux操作系统的作用

linux操作系统在以下领域发挥着关键作用:服务器和云计算;嵌入式系统;个人电脑和笔记本电脑;超级计算;其他领域等等。想了解更多linux操作系统的相关内容,可以阅读本专题下面的文章。

2024.04.12

3135

5

有哪些常见的网络操作系统
有哪些常见的网络操作系统

常见的网络操作系统有windows server、linux、unix、macos server、freebsd、cisco ios、juniper junos和hp-ux等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.09.12

3704

6

32位操作系统怎么改成62位的
32位操作系统怎么改成62位的

要将 32 位操作系统升级到 64 位,需要遵循以下步骤:1. 检查硬件和软件兼容性;2. 备份数据;3. 获取 64 位操作系统;4. 创建可启动安装媒体;5. 从安装媒体启动计算机;6. 选择“升级”选项;7. 完成安装。

2025.04.02

3583

9

服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

457

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

960

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

3212

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习