Linux 运维中怎么排查由于文件描述符(File Descriptor)超限导致的目录打开失败

秋明君_8479

秋明君_8479

2026-10-21

354人浏览

原创

目录打开失败若由文件描述符超限引起,本质是进程open()/opendir()时系统无法分配新fd,报错为too many open files;需分层排查:先查/proc/sys/fs/file-nr确认系统全局是否耗尽,再查目标进程/proc/pid/limits与/proc/pid/fd/实时占用,接着用lsof定位高fd进程及dir类泄漏,最后同步修复systemd limitnofile、fs.nr_open和容器ulimit等配置盲区。

linux 运维中怎么排查由于文件描述符(file descriptor)超限导致的目录打开失败

目录打开失败若由文件描述符超限引起,本质是进程尝试 open() 或 opendir() 时系统无法分配新 fd,报错通常为 Too many open files。排查不能只看“打不开目录”这一现象,而要分层确认:是系统全局资源真没了?还是当前进程被卡在低限制?或是某个进程悄悄占光了句柄?下面按实际运维顺序展开。

确认系统级文件描述符是否濒临耗尽

先排除“锅在系统”的可能。执行:

cat /proc/sys/fs/file-nr

输出三列,例如 1845200 0 2097152:

  • 第一列(1845200):已分配的 fd 总数,即当前系统已用掉的数量
  • 第三列(2097152):系统硬上限(fs.file-max)
  • 若第一列 ÷ 第三列 ≥ 0.9,说明全局资源紧张,需立即调高 file-max 或查泄漏源

再查上限值本身是否合理:

cat /proc/sys/fs/file-max

生产环境建议不低于 2097152(200 万)。若远小于此值,说明内核参数长期未调优。

检查目标进程的实际限制与实时占用

目录打不开往往发生在某个服务进程里(如 nginx worker、Java 应用、自研脚本),不能只看 shell 的 ulimit -n,必须查该进程本身:

① 找到进程 PID,例如:

pgrep -f "myapp.py" | head -n1

② 查它的真实软硬限制:

cat /proc/$(PID)/limits | grep "Max open files"

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载

输出类似 Max open files 1024 4096 files —— 左边 1024 是软限制,真正生效的值;右边 4096 是硬限制上限。

③ 查它此刻开了多少 fd:

ls /proc/$(PID)/fd/ | wc -l

若数量接近软限制(比如开了 1020 个,软限是 1024),那基本就是它自己撞墙了,不是系统没资源。

定位高 fd 占用的进程和文件类型

即使总用量不高,也可能有某个进程疯狂开目录、日志、socket 却不关,导致局部耗尽。用 lsof 快速扫描:

lsof -n | awk '{print $2}' | sort | uniq -c | sort -nr | head -10

这会列出打开 fd 最多的前 10 个 PID。再对可疑 PID 深挖:

lsof -p $(PID) | awk '$5 ~ /^DIR$/ {count++} END {print "DIR count:", count+0}'

重点看 DIR 类型数量——如果一个进程打开了几千个目录却没 closedir(),极可能是代码里 opendir() 后漏了关闭,或反复 readdir() 未重置。

也可直接筛目录类 fd:

lsof -p $(PID) | grep 'DIR'

验证并修复常见配置盲区

很多故障修不好,是因为改了 A 处却忽略了 B 处。以下三点最常漏:

  • systemd 服务必须显式设 LimitNOFILE:在 /etc/systemd/system/myapp.service 的 [Service] 段加 LimitNOFILE=65536,然后 systemctl daemon-reload && systemctl restart myapp。仅改 /etc/security/limits.conf 对 systemd 启动的服务无效
  • fs.nr_open 要同步调高:若你把 file-max 设到 4194304,但 fs.nr_open 还是默认 1048576,新进程仍会被单进程上限截断。查:cat /proc/sys/fs/nr_open,改:sysctl -w fs.nr_open=4194304
  • 容器场景需单独配 ulimit:Docker 默认不继承宿主机限制。启动容器时加 --ulimit nofile=65536:65536,或在 docker-compose.yml 中写 ulimits: {nofile: {soft: 65536, hard: 65536}}

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

457

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

940

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

3052

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

1016

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

909

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

474

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2796

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

5212

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

807

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习