容器管理怎么监控容器的句柄泄漏问题

轻萱姑娘_5030

轻萱姑娘_5030

2026-08-26

377人浏览

原创

核心是绕过docker api失灵盲区,直接观测内核和进程级fd状态:用ls /proc/$(pgrep dockerd)/fd | wc -l监控总数,结合lsof -p查socket/epoll/deleted等类型,并通过/proc/sys/fs/file-nr、/proc/net/sockstat、ss -s、df -i交叉验证系统级瓶颈,辅以ulimit配置与cni插件升级加固。

容器管理怎么监控容器的句柄泄漏问题

容器管理中监控句柄泄漏,核心是绕过 Docker API 的“失灵盲区”,直接观测内核和进程级真实资源状态。Docker daemon 自身一旦陷入假死,docker ps、docker stats 就不可信,必须用底层手段抓取实时句柄(file descriptor, fd)行为。

盯住 /proc/[pid]/fd/ 目录变化

这是最轻量、最直观的泄漏信号捕获方式:

  • 先查 dockerd 主进程 PID:pgrep dockerd(通常为 1 个主进程,注意多实例场景)
  • 执行 ls /proc/$(pgrep dockerd)/fd/ | wc -l 获取当前打开 fd 数
  • 用 watch -n 1 'ls /proc/$(pgrep dockerd)/fd/ | wc -l' 每秒刷新——若数字持续上涨(尤其 > 65536),基本确认泄漏已发生
  • 对比正常值:稳定运行时 dockerd 通常维持在 200–800 个 fd;超 2000 且缓升即需警惕;超 10000 多为临界状态

分类统计异常 fd 类型

单纯总数不够,要定位泄漏源头类型:

HTML5主机托管服务公司网站模板
HTML5主机托管服务公司网站模板

HTML5主机托管服务公司网站模板是一款从事主机托管服务公司宣传网站模板下载。提示:本模板调用到谷歌字体库,可能会出现页面打开比较缓慢。

下载
  • lsof -p $(pgrep dockerd) | grep socket | wc -l —— 查网络 socket 是否堆积(常见于 CNI 插件未 cleanup 或 conntrack 表满)
  • lsof -p $(pgrep dockerd) | grep anon_inode | wc -l —— 查 epoll/eventfd/timerfd 等内核对象(典型于 containerd 或 shim 进程未 close event loop)
  • lsof -p $(pgrep dockerd) | grep deleted —— 查已被删除但进程仍持握的文件(如日志轮转后未 reload 的 file fd)
  • 重点关注 NAME 列含 pipe、eventpoll、inotify、timerfd 的条目,这些极易因逻辑遗漏而长期滞留

结合内核全局状态交叉验证

单看 dockerd 不够,需确认系统级压力是否已达瓶颈:

  • cat /proc/sys/fs/file-nr —— 输出三列:已分配、已使用、最大限制。第二列接近第三列(如 65535/65536)说明整个系统 fd 耗尽
  • cat /proc/net/sockstat —— 关注 sockets: used 和 tcp: inuse 值。若 inuse > 60000 或 tw > 15000 且不回落,表明 TCP 层已淤塞
  • ss -s —— 查 total sockets 总数及 TCP/UDP 分布,辅助判断是协议栈问题还是用户态泄漏
  • df -i —— inode 使用率 > 95% 会直接阻塞新 socket 创建,常被忽略但影响致命

容器侧预防性配置与加固

监控是发现手段,配置才是防线:

  • 启动 dockerd 时强制设 ulimit:ExecStart=/usr/bin/dockerd --ulimit nofile=65536:65536(systemd unit 中),避免默认 1024 成瓶颈
  • Docker CLI 启动容器加 --ulimit nofile=65536:65536;Compose 文件中写 ulimits: { nofile: { soft: 65536, hard: 65536 } }
  • 对 Java/Go/Node.js 容器,确保应用代码正确释放资源:Java 用 try-with-resources 包裹 Socket/InputStream;Go defer os.File.Close();Node.js 设置 http.Agent keepAlive timeout ≤ 5s 并复用 agent 实例
  • 定期检查 CNI 插件版本(如 calico v3.26+、cilium v1.14+ 已修复多起 refcount 泄漏),升级前务必验证 conntrack 表清理逻辑

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3710

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3213

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2293

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

5510

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

5182

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3073

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2585

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

2799

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

277

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpMyAdmin 配置文档
phpMyAdmin 配置文档

共0课时 | 0人学习

Swoole手册
Swoole手册

共0课时 | 0人学习