怎么利用 DirectBuffer 的 cleaner 机制分析堆外内存在 JVM 手动回收时的安全挑战

大瑶小哥_5696

大瑶小哥_5696

2026-04-23

539人浏览

原创

DirectByteBuffer 的 Cleaner 不可手动调用且不可靠,其 clean() 方法仅由 JVM 内部 ReferenceHandler 线程自动触发;手动调用无效且危险,System.gc() 触发的回收不可控,真正可控的是显式释放与资源约束。

怎么利用 directbuffer 的 cleaner 机制分析堆外内存在 jvm 手动回收时的安全挑战

DirectByteBuffer 的 Cleaner 不是手动回收接口

很多人误以为调用 Cleaner.clean() 就能立即释放堆外内存,这是危险的误解。Cleaner 本质是虚引用的封装,它的 clean() 方法只应在 JVM 内部由 ReferenceHandler 线程自动触发——你手动调用它,既不会释放内存(因为 Deallocator 的执行受内部状态保护),还可能破坏 Cleaner 链表结构,导致后续 GC 无法正常清理其他对象。

常见错误现象:

  • 手动 new Cleaner(...) 并调用 clean() → 无效果,unsafe.freeMemory() 不被执行
  • 反射获取 DirectByteBuffer.cleaner 字段后强制调用 clean() → 可能抛 NullPointerException 或静默失败,且该对象仍保留在 Cleaner 链表中,形成“假释放”假象

System.gc() 触发的 Cleaner 回收不可靠

当 Bits.reserveMemory() 检测到堆外内存不足时,会主动调用 System.gc(),但这不是解决方案,而是兜底试探。它的实际效果取决于 JVM 参数和运行时状态:

  • 若启用了 -XX:+DisableExplicitGC(生产环境常见),System.gc() 直接退化为空操作,Cleaner 完全不会被处理
  • 即使未禁用,Full GC 的时机也不可控:可能延迟数秒甚至数分钟,期间堆外内存持续泄漏
  • 频繁调用 System.gc() 会干扰 GC 正常节奏,引发 STW 时间突增,尤其在 G1 或 ZGC 下更明显

这不是“要不要调”的问题,而是“根本不能依赖”的问题。

Cleaner 机制本身存在异步与竞争风险

Cleaner 的整个生命周期由两个独立线程协作完成:ReferenceHandler(处理引用队列)和 Deallocator 执行线程(实际调用 unsafe.freeMemory())。这带来两个硬伤:

  • ReferenceHandler 是低优先级守护线程,若系统负载高或队列积压,Cleaner 入队可能延迟,导致堆外内存“已无引用但未释放”窗口扩大
  • Deallocator.run() 中的 unsafe.freeMemory(address) 是非原子操作;若此时发生 JVM crash 或 address 被意外复用(如 Unsafe 误操作),可能造成悬空指针或越界访问
  • Cleaner 链表是单向链表 + volatile head,没有锁保护;并发大量创建/回收 DirectByteBuffer 时,链表断裂虽罕见,但一旦发生,对应堆外内存永久泄漏

真正可控的回收路径只有显式清理 + 资源约束

想让堆外内存行为可预测,必须绕过 Cleaner 的被动性,走确定性路径:

  • 对 Netty、RocketMQ 等框架,启用其内置池化(如 PooledByteBufAllocator),并确保 ByteBuf.release() 被正确调用——这会归还 buffer 到池中,避免新分配
  • 自研使用 ByteBuffer.allocateDirect() 时,用 try-with-resources 包装自定义 AutoCloseable 实现,在 close() 中调用 Bits.unreserveMemory() 和 unsafe.freeMemory()(需通过反射获取地址字段)
  • 强制限制总量:启动参数设死 -XX:MaxDirectMemorySize=512m,配合 NMT 监控 jcmd VM.native_memory summary,一旦接近阈值就熔断新分配

Cleaner 是 JVM 给的“尽力而为”保障,不是安全绳。真正在意堆外内存生命周期的场景,得自己握紧释放的手柄,而不是等那个不确定的“通知”。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

11837

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

8922

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

7652

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1264

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1008

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1496

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3089

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20351

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1355

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习