ss -m 显示大量内存占用但进程 RSS 不高的 TCP 内存泄漏排查

酷墨大大_3761

酷墨大大_3761

2026-01-18

192人浏览

原创

tcp内存占用高而rss低是内核socket缓冲区堆积所致,非用户态进程直接占用;需通过/proc/net/sockstat、ss -i、tcp_mem等定位接收队列积压及对应进程。

ss -m 显示大量内存占用但进程 rss 不高的 tcp 内存泄漏排查

ss -m 显示 TCP 内存占用高,但对应进程的 RSS(Resident Set Size) 却很低,这是典型的内核协议栈内存未及时释放现象,不是用户态进程直接“吃掉”了内存,而是 TCP socket 缓冲区(尤其是接收队列)堆积导致内核 sk_buff 和相关结构体持续驻留。关键在于:TCP 内存统计在内核层面(/proc/net/sockstat、ss -m),而 RSS 只反映进程地址空间中实际映射的物理页,不包含内核为该进程 socket 分配的缓冲区内存。

确认是否真为 TCP 内存泄漏

先排除误判:

  • 执行 cat /proc/net/sockstat,重点关注 sockets: used 和 TCP: 行中的 inuse、orphan、tw(TIME_WAIT)、alloc、mem 字段;若 mem 持续增长且远高于 inuse × 128KB(默认单 socket 内存上限),说明存在异常积压
  • 运行 ss -i -n state established | head -20,观察每个 ESTAB 连接的 rcv_rtt、rcv_space、rcv_ssthresh,特别留意 rcv_q(接收队列长度)是否长期 > 0 且不下降——这表示应用未及时调用 recv(),数据卡在内核接收缓冲区
  • 检查 /proc/sys/net/ipv4/tcp_mem,确认当前系统 TCP 内存压力等级(第三值为上限),再看 /proc/net/snmp 中 Tcp: 行的 InSegs 与 OutSegs 是否匹配,若 InSegs ≫ OutSegs,说明入包远多于被应用读走的量

定位具体 socket 和所属进程

ss -t -i -n -m 可同时显示连接状态、TCP 信息和内存详情,但需配合 -p(需 root)才能关联 PID:

OpenJDK 24
OpenJDK 24

OpenJDK 24 Windows x64 官方参考实现(24+36),适合 Windows 环境进行 Java 开发、编译、运行和版本兼容性验证。

下载
  • 用 sudo ss -t -i -n -m -p | grep -A5 'rcv_q:[[:digit:]]\{4,\}' 找出接收队列过大的连接
  • 对目标连接提取 inode 号(如 ino:12345678),再查 sudo ls -l /proc/*/fd/ | grep 12345678 定位进程 PID
  • 更高效方式:sudo ss -t -i -n -m -p | awk '$1~/^u/ || $1~/^t/ {if($NF~/pid=/) print $NF,$(NF-1)}' | sort -k2,2nr | head -10,按接收队列大小倒序列出进程名和 PID

检查应用行为与配置

常见根因集中在应用层消费能力不足或配置不合理:

  • 服务端未启用 SO_RCVBUF 自动调优(/proc/sys/net/ipv4/tcp_window_scaling=1 必须开启),或手动设了过小固定值,导致窗口无法扩展,对端持续重传,内核被迫缓存更多数据
  • 应用使用阻塞 I/O 且 recv 调用频率低、每次读取字节数少(如只读 1 字节),造成大量小包堆积在 sk_receive_queue
  • 长连接场景下,客户端发送速率远高于服务端处理速度(如日志推送、IoT 上报),又未实现流控或背压机制
  • 存在连接泄漏:socket 未 close,但应用逻辑已丢失引用(如 Java 中未关闭 InputStream),导致连接处于 FIN_WAIT2 或 CLOSE_WAIT 状态,接收缓冲区无法释放

临时缓解与长期修复

应急可降低影响,但治本需修改应用逻辑:

  • 临时:调大 /proc/sys/net/ipv4/tcp_rmem 第三项(max),避免因缓冲区满触发丢包重传加剧堆积;或用 echo 1 > /proc/sys/net/ipv4/tcp_fin_timeout 加速 FIN_WAIT2 回收(慎用)
  • 监控项补充:在 Prometheus + node_exporter 中添加 node_netstat_Tcp_InSegs、node_sockstat_TCP_mem、process_resident_memory_bytes{process=~"your_app"} 三者对比告警
  • 代码侧:确保所有 socket 调用 setsockopt(..., SO_RCVBUF, ...) 合理值(如 1MB);使用非阻塞 I/O + epoll/kqueue;每轮 recv 至少读取 min(64KB, available);对慢客户端主动断连

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java git node 字节 stream

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end='\n', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.27

2820

5

python print用法与作用
python print用法与作用

本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

2026.02.03

249

24

sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

2023.09.04

1138

7

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

2025.06.09

4614

18

golang结构体方法
golang结构体方法

本专题整合了golang结构体相关内容,请阅读专题下面的文章了解更多。

2025.07.04

4771

25

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

5667

5

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.10

2448

6

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

5667

5

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.10

2448

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习