大数据量时基本数据类型怎么节省内存

轻涛君_7355

轻涛君_7355

2026-10-20

268人浏览

原创

基本数据类型节省内存的核心在于避免封装、减少冗余、贴近硬件布局;它们无对象头、无引用跳转、无gc跟踪,天然轻量,关键在于用对场景——如用int[]替代list可省内存数倍,禁用隐式装箱,按需选型(byte/short代替int)、紧凑字段排列、平行数组替代对象数组。

大数据量时基本数据类型怎么节省内存

基本数据类型节省内存的核心在于“避免封装、减少冗余、贴近硬件布局”。它们不带对象头、无引用跳转、无GC跟踪,天然轻量——关键是怎么用对、用足。

用原生数组替代包装类集合

Java 中 int[] 比 List 节省内存数倍:前者连续存 4 字节整数;后者每个 Integer 是独立堆对象(至少 16 字节),还附带 ArrayList 的容量数组和 size 字段。大数据统计、索引映射、滑动窗口等场景,直接声明 int[] counts = new int[1000000],比反复 add() 到 ArrayList 快且稳。

  • 数据库批量读取数值字段时,用 ResultSet.getInt() 配合预分配 long[],别转成 List<long></long>
  • 禁用 Arrays.asList(new int[]{...})——它返回的是 List<int></int>,不是你想要的,并可能触发意外装箱
  • 排序、求和、去重等操作优先调用 Arrays.sort()、IntStream.sum(),而非先转集合再 stream

精简类型宽度与对齐填充

不盲目用 long 存 ID、不用 double 存金额。一个 int(4 字节)能覆盖 21 亿范围,足够多数业务主键或计数器;货币统一转为 long 存“分”,避免 double 的精度误差和 8 字节开销。Python 中同理:pd.read_csv(dtype={'user_id': 'int32', 'score': 'int16'}) 可比默认 int64 减少一半以上内存。

人工智能数字技术机器人全息大脑大数据分析矢量素材(EPS)
人工智能数字技术机器人全息大脑大数据分析矢量素材(EPS)

这是一款人工智能数字技术机器人全息大脑大数据分析矢量素材,格式为 EPS,含 JPG 预览图。

下载
  • 字符串高频重复字段(如状态码、地区名)改用 category 类型(Pandas)或枚举索引(Java 枚举 + int[] 映射)
  • 布尔值在 Java 中用 boolean[],别用 Boolean[] 或 List<boolean></boolean>;Python 中用 pd.array(..., dtype="boolean") 或 NumPy bool_
  • 注意 JVM 对齐规则:两个 byte 不会压缩成 2 字节,常因对齐补到 4 或 8 字节;紧凑结构优先用 int、long 等自然对齐类型

规避隐式装箱与中间对象爆炸

循环中写 list.add(i)(i 是 int)会自动装箱;Stream.of(1,2,3) 本质是 Stream<integer></integer>;for-each 遍历 Integer[] 也会拆箱再装箱。这些操作在百万级循环里等于凭空创建百万对象。

  • 用传统 for (int i = 0; i 替代 <code>for (Integer x : list)
  • Stream 处理基本数组必须用 Arrays.stream(intArr) 得到 IntStream,而非 Stream.of(intArr)
  • 聚合运算直接调 IntStream.average()、LongStream.max(),别走 stream.mapToInt(x -> x).average() 这种多层包装路径

结构扁平化:多个平行数组胜过对象数组

算法中需维护节点状态(坐标、访问标记、距离值)时,别定义 Node[] nodes = new Node[n]。每个 Node 至少含对象头 + 3 个字段 + 对齐填充,总开销远超三个独立 int[]。

  • 改成 int[] x, int[] y, boolean[] visited, int[] dist,内存连续、缓存友好、GC 压力归零
  • 回溯/DFS 中临时状态可复用同一组数组,用下标推进,避免 new 对象
  • 如果逻辑强耦合,可用静态内部类只含 final 基本字段,但依然不如平行数组极致

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

大数据

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

10797

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

7922

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

6872

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1164

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

948

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1416

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2849

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20131

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1255

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 188人学习

大数据(MySQL)视频教程完整版
大数据(MySQL)视频教程完整版

共200课时 | 28.2万人学习

PHP会话控制/文件上传/分页技术
PHP会话控制/文件上传/分页技术

共22课时 | 2.9万人学习