怎么利用 Netty 的 Recyclable 对象池技术实现在超高吞吐环境下对小对象的零 GC 压力

冬晨小哥_5135

冬晨小哥_5135

2026-04-27

749人浏览

原创

netty的recycler无法保证零gc,但正确使用可使小对象gc压力趋近于零;需满足生命周期短、高频创建、构造开销大、状态可重置、不跨线程逃逸等条件,并严格实现newobject与recycle。

怎么利用 netty 的 recyclable 对象池技术实现在超高吞吐环境下对小对象的零 gc 压力

Netty 的 Recycler 本身不提供“零 GC”的绝对保证,但它能在绝大多数高吞吐场景中把小对象的 GC 压力压到趋近于零——前提是正确使用、避免跨线程误回收、控制好容量阈值。

Recycler 不是万能的:哪些对象适合池化

它只对满足以下全部条件的小对象有效:

  • 生命周期短、创建/销毁频率极高(如每秒数万次)
  • 构造开销明显(字段初始化、集合预分配等)
  • 逻辑状态可安全重置(recycle() 调用前必须清空业务字段)
  • 不逃逸出创建线程(即不被其他线程长期持有或共享)

典型例子:HttpRequest / HttpResponse 包装器、自定义协议帧解析器、事件上下文 HandlerContext 辅助对象。反例:含外部引用的回调闭包、带 ThreadLocal 引用的单例包装器、未重写 recycle() 的子类。

必须重写 newObject(Handle) 和 recycle()

直接继承 Recycler 并不自动复用对象;你得自己管理对象状态。关键点:

  • newObject(Handle) 返回新实例,但不要做任何业务初始化(留到首次使用时)
  • recycle() 必须显式重置所有字段(包括集合 clear()、引用置 null),否则下次 get() 拿到的是脏数据
  • 不要在 recycle() 中调用 super.recycle() —— 它已由 Recycler 内部完成

示例片段:

public class MyEvent extends Recycler.MyObject {
    private String id;
    private int code;

    private MyEvent(Recycler<myevent> recycler) {
        this.recycler = recycler;
    }

    public static MyEvent newInstance() {
        return RECYCLER.get();
    }

    @Override
    protected void recycle() {
        this.id = null; // 必须清空
        this.code = 0;
        this.recycler.recycle(this); // 注意:不是 super.recycle()
    }

    private static final Recycler<myevent> RECYCLER = new Recycler<myevent>() {
        @Override
        protected MyEvent newObject(Handle<myevent> handle) {
            return new MyEvent(handle);
        }
    };
}</myevent></myevent></myevent></myevent>

线程本地栈溢出与 DEFAULT_MAX_CAPACITY

每个线程的 Stack 默认最大容量是 Recycler.DEFAULT_MAX_CAPACITY = 4096。超过后新对象不再入栈,直接走 new 分配 → 瞬间引入 GC。

  • 若压测发现 P99 延迟突增且 GC 日志出现大量 Allocation Failure,先查是否栈满
  • 可通过 -Dio.netty.recycler.maxCapacityPerThread=8192 调整,但别盲目拉高——内存占用线性增长,且缓存局部性下降
  • 更推荐方式:结合监控,在业务低峰期用 Stack.size()(需反射访问)采样各线程实际占用,按 95 分位设上限

跨线程回收导致 WeakOrderQueue 积压

当 A 线程创建的对象被 B 线程调用 recycle(),它会进入 B 线程的 WeakOrderQueue,等待下一次 A 线程调用 get() 时被迁移回栈。但如果 A 线程长期空闲,队列就堆积 → 内存泄漏风险 + 回收延迟。

  • 禁止在 IO 线程外(如业务线程池)调用 recycle()
  • 若必须跨线程释放(如异步回调),改用 PooledByteBufAllocator 配合 ByteBuf.release(),它有更健壮的跨线程引用计数机制
  • 可通过 JVM 参数 -Dio.netty.recycler.delayedQueueRatio=2 加快迁移频率(默认是 1/8 次 get 触发一次迁移)

真正难处理的从来不是怎么写 Recycler,而是让所有开发者都记得:每次 get() 后必须 recycle(),且不能跨线程乱传对象引用——这点靠代码审查和单元测试覆盖比靠文档更可靠。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

10837

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

7962

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

6912

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1164

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

948

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1416

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2849

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20151

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1255

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.8万人学习