如何评估集合在大对象存储场景下的JVM堆内存占用开销

云晨君_2368

云晨君_2368

2026-04-02

1001人浏览

原创

集合容器自身引用开销显著:hashmap等持有大量引用(4/8字节),扩容导致冗余空间超50%,concurrenthashmap内存碎片更严重;应使用jol精确测量、预设容量、优选原生数组或专用集合结构。

如何评估集合在大对象存储场景下的jvm堆内存占用开销

集合对象本身不存数据,但引用开销不可忽略

在大对象存储场景(比如缓存百万级 User 实例)中,很多人只关注单个对象大小,却忽略 ArrayList、HashMap 这类集合容器自身的堆内存开销。它们不存业务数据,但会持有大量引用——每个引用在 64 位 JVM(开启指针压缩时)占 4 字节,未开启则占 8 字节。

以 HashMap 为例:默认初始容量 16,负载因子 0.75,实际扩容阈值是 12。插入 100 万个 User 对象时,它大概率会扩容到 2^20(约 104 万)桶数组,即分配一个长度为 1 的 <code>Node[] 数组。这个数组本身就要占 2^20 × 4 = 4MB(指针压缩开启),还不算链表/红黑树节点对象开销。

  • ArrayList 的 elementData 数组同样存在“容量 > size”现象,冗余空间可能达 50% 以上
  • ConcurrentHashMap 在 Java 8+ 使用分段 Node[] + TreeBin,内存碎片更明显,且每个 segment 都有独立锁对象开销
  • 使用 Arrays.asList() 包装的集合是 Arrays$ArrayList,底层直接复用传入数组,无额外引用数组,但不可扩容

用 JOL 精确测量集合基础结构大小

别靠估算,用 org.openjdk.jol:jol-cli 直接看运行时布局。它能暴露对象头、对齐填充、引用字段、数组元数据等真实占用。

例如测量空 HashMap:

java -jar jol-cli.jar internals java.util.HashMap

输出会显示:java.util.HashMap 对象头 12 字节 + 4 个 int/float 字段(共 16 字节)+ 1 个 Node[] 引用(4 字节)+ 对齐填充 → 共 32 字节(64 位 JVM + 指针压缩)。而它的 table 字段指向的数组,是另一块独立内存。

  • 测量带数据的实例,必须用 VM.current().addressOf(obj) 或 ClassLayout.parseInstance(obj).toPrintable(),否则只看到类模板
  • ArrayList 的 elementData 数组长度为 10 时,数组对象本身占 24(头)+ 4(length)+ 10×4(引用)+ 对齐 = 64 字节
  • JOL 不模拟 GC 压缩,所以对老年代大集合的“实际驻留大小”仍有偏差,但比 ObjectSizeCalculator 更可靠

避免 HashMap 的隐式扩容与哈希冲突放大内存

高频 put 操作触发扩容时,JVM 需要同时持有新旧两个 Node[] 数组,瞬时内存翻倍。更隐蔽的是哈希冲突:若 key 的 hashCode() 实现低效(如恒返回 0),所有元素挤进同一个桶,链表转红黑树后,每个 TreeNode 比 Node 多 3 个引用字段(parent、left、right),单节点从 24 字节涨到 40 字节以上。

  • 初始化 HashMap 时显式指定容量:new HashMap(expectedSize / 0.75f + 1),避免多次扩容
  • 确认 key 类型重写了 hashCode() 和 equals(),且分布均匀;用 key.hashCode() & (n - 1) 模拟桶索引,快速验证是否扎堆
  • 对只读场景,用 Map.copyOf()(Java 10+)生成不可变副本,底层可能共享数组或做紧凑压缩
  • 考虑用 IdentityHashMap 替代(如果语义允许),它用 System.identityHashCode(),规避自定义哈希实现缺陷

大集合场景优先选数组或专用结构,而非泛型集合

当明确知道元素类型和访问模式时,ArrayList<user></user> 是最差选择之一:泛型擦除导致 Object[] 存储,每个 User 引用都多一层间接;而 User[] 数组直接持有对象引用,无包装、无接口虚调用、GC Roots 更扁平。

  • 用 User[] users = new User[capacity] 替代 ArrayList<user></user>,节省约 16–24 字节/实例的容器开销
  • 需要键值映射?考虑 ObjIntMap<user></user>(来自 Eclipse Collections)或 LongObjectHashMap(HPPC),它们用原生数组替代 Object[],避免装箱和引用跳转
  • 如果集合生命周期长且写少读多,启用 JVM 参数 -XX:+UseCompressedOops(默认开启)和 -XX:CompressedClassSpaceSize=256m,防止指针压缩失效导致引用膨胀

真正吃内存的往往不是那个百万级 User 对象本身,而是你随手 new 出来的第 3 个 HashMap —— 它的桶数组正在后台默默占着 8MB 连续堆空间,而你还在 debug 为什么老年代回收不动。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

10017

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

7162

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

6292

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1084

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

908

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1316

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2629

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

19951

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1175

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习