Linux 怎么排查 Nginx 进程频繁异常崩溃退出的底层日志

夏强吖_1197

夏强吖_1197

2026-08-09

449人浏览

原创

先查dmesg确认是否被OOM Killer杀死,再核对error.log中“exited on signal 9/11”时间戳,结合access.log异常请求与core dump堆栈交叉定位根因。

linux 怎么排查 nginx 进程频繁异常崩溃退出的底层日志

排查 Nginx 进程频繁异常崩溃,不能只盯着 error.log 里有没有“crash”字样——真正关键的日志分散在系统底层,需要分层抓取、交叉比对。核心思路是:先确认是不是被系统强制杀掉,再锁定触发时机,最后回溯到具体请求或配置行为。

看 dmesg 确认是否被 OOM Killer 干掉

Linux 内核在内存不足时会主动杀死进程,Nginx worker 是常见目标。这个动作不会写进 Nginx 日志,但会在内核日志留下明确记录:

  • 运行 dmesg -T | grep -i "killed process nginx",找类似这样的输出:
    [Tue Jul 29 09:15:22 2026] Out of memory: Kill process 18432 (nginx) score 872 or sacrifice child
  • 如果匹配成功,说明是内存耗尽导致的被动终止,下一步重点查内存分配异常(比如缓存未释放、大 body 积压、ssl session cache 配置过大)
  • 同时检查 free -h 和 cat /proc/meminfo | grep -i "oom\|commit",确认当时内存压力水平

查 error.log 中的 signal 退出线索

Nginx 自身日志虽不记原因,但会忠实记录结果。重点关注以下两类行:

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载
  • worker process 12345 exited on signal 9 → 基本等于被 OOM Killer 杀;exited on signal 11 → 段错误,多为模块 bug 或内存越界
  • worker process 12345 exited on signal 11 (core dumped) → 表示已生成 core 文件,可配合 gdb 分析真实崩溃点
  • 注意时间戳对齐:把 signal 出现的时间,和 dmesg 中的 kill 时间、access.log 中的慢请求/大请求时间做三重比对

启用并定位 core dump 文件

Signal 11 类崩溃必须靠 core 文件才能定位根因:

  • 先确保开启:ulimit -c unlimited,并在 /etc/security/limits.conf 中为 nginx 用户配好 nginx soft core unlimited
  • 查 core 路径:cat /proc/sys/kernel/core_pattern,常见两种情况:
    • 输出 core → 文件在 Nginx 工作目录(通常是 /usr/local/nginx 或 /etc/nginx)
    • 输出 |/usr/lib/systemd/systemd-coredump %P... → 文件在 /var/lib/systemd/coredump/,后缀是 .xz
  • 用 gdb $(which nginx) /path/to/core,然后输入 bt full 查看崩溃堆栈,重点关注第三方模块(如 lua、echo、headers-more)调用位置

结合 access.log 锁定异常请求模式

很多崩溃不是随机发生,而是由特定请求持续触发:

  • 在 signal 发生前后 30 秒内,提取 access.log 中响应时间 >5s、body_size >10MB、或 user_agent 含扫描特征(如 sqlmap、dirbuster)的请求
  • 统计高频 URI 或 IP:awk '$9 > 5000 {print $7}' access.log | sort | uniq -c | sort -nr | head -10(找响应超长的路径)
  • 特别关注反复出现的 400 错误:"client intended to send too large body" 或 "request header too large",这类请求会让 Nginx 缓冲区持续堆积,最终拖垮 worker

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux nginx

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.27

423

5

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3967

6

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

2023.08.04

6785

6

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

601

5

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.07.09

1516

5

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

2024.08.07

3978

3

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

122

12

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

537

23

Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建
Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建

本指南详解Nginx在Windows、macOS及Linux系统的安装全流程。涵盖官方包解压、Homebrew一键部署、APT/YUM源配置及Docker容器化方案。无论新手或开发者,均可快速搭建运行环境,掌握跨平台核心指令,为后续配置与调优奠定坚实基础。

2026.03.16

179

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习