怎么排查由于Linux文件句柄限制导致的连接数溢出报错

秋墨君_9115

秋墨君_9115

2026-06-07

488人浏览

原创

应先分层验证系统级(file-nr第二列)与进程级(/proc/pid/limits)实际使用量,再定位泄漏源而非盲目调参;systemd服务需配limitnofile,容器须在运行时指定ulimit,且file-max须≤nr_open以防静默失败。

怎么排查由于linux文件句柄限制导致的连接数溢出报错

遇到“Too many open files”或连接建立失败、超时等现象,不能直接认定是句柄限制问题,得先确认是不是真满了、谁在吃、为什么没释放——否则调参只是把崩溃推迟几小时。

看系统到底满没满

别只盯着报错,要分两层验证:

  • 系统级总量:执行 cat /proc/sys/fs/file-nr,输出三列,第二列才是「当前活跃占用」的句柄数(已分配且正在用),它接近第三列(file-max)才危险;
  • 进程级限额:查目标进程真实限制,比如 nginx,运行 cat /proc/$(pgrep nginx | head -n1)/limits | grep "Max open files",重点看 Soft Limit 是否远低于实际使用量。

找哪个进程在疯狂吃句柄

全局排查最有效的方法是:

Vibe Island
Vibe Island

一款AI开发辅助工具,主要用于灵动岛式AI编程管理工具,适合需要提升相关任务效率的用户。

下载
  • 执行 lsof -n | awk '{print $2}' | sort | uniq -c | sort -nr | head -10,列出打开句柄最多的前10个 PID;
  • 再针对高 PID 查类型分布:lsof -p | awk '{print $8}' | sort | uniq -c | sort -nr | head -10,看是不是大量 IPv4(连接)、REG(文件)、pipe 或 anon_inode(NIO 常见泄漏点);
  • 对 Java 应用,可加采样比对:lsof -p $(pgrep -f 'java.*YourApp') | wc -l,每分钟执行一次,观察是否持续上涨。

确认配置改了到底有没有生效

很多改了 limits.conf 却不生效,是因为启动方式不同:

  • 交互式登录用户:改完 /etc/security/limits.conf 后必须新开 login shell(不是 su 或子 shell),且确认 /etc/pam.d/common-session 包含 session required pam_limits.so;
  • systemd 服务(如 nginx、redis、Java 应用):limits.conf 完全无效,必须在 service 文件里加 LimitNOFILE=65536,然后 systemctl daemon-reload && systemctl restart xxx;
  • 容器环境(Docker/K8s):宿主机改没用,需在 docker run --ulimit nofile=65536:65536 或 Pod 的 securityContext.fdsLimit 中显式设置。

排除泄漏,不止靠调大

如果句柄数随时间稳定上升,说明存在泄漏:

  • 检查代码:Java 要确保所有 InputStream、Socket、Connection 都在 try-with-resources 或 finally 中 close;
  • 检查日志滚动:Logback 或 Log4j 配置不当(如未启用 prudent mode 或文件句柄未释放)会累积 REG 类型句柄;
  • 检查网络状态:用 netstat -an | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}' 看是否有大量 CLOSE_WAIT 或 TIME_WAIT 不释放,可能对应连接池未正确回收。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

437

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

880

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2672

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

896

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

809

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

414

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2416

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

4472

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

727

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习