如何在Java代码中高效导出千万级Oracle数据到Excel?

云浩姑娘_2758

云浩姑娘_2758

2026-11-12

532人浏览

原创

JDBC流式查询需关闭自动提交、设置fetchSize、声明只读前向游标;Excel导出用SXSSF并定期dispose;Oracle时间字段用LocalDateTime等显式解析;优先用临时表分页避免长事务锁表。

如何在java代码中高效导出千万级oracle数据到excel?

用 JDBC 流式查询避免 OOM

直接 Statement.executeQuery() 拿全部结果集会把千万行全加载进内存,Java 进程很快 OOM。必须用流式(streaming)方式逐批拉取,关键在设置 setFetchSize() 和关闭自动提交。

  • connection.setAutoCommit(false) 必须关掉,否则 Oracle JDBC 驱动可能忽略 fetch size
  • statement.setFetchSize(5000) 设为 2000–10000 之间较稳,太小增加网络往返,太大仍占内存
  • 用 ResultSet.TYPE_FORWARD_ONLY + ResultSet.CONCUR_READ_ONLY 显式声明游标类型,驱动才真正启用服务器端游标
  • 别调 resultSet.last() 或 getRowCount(),会触发全量拉取

选 Apache POI SXSSF 而非 XSSF

千万行用 XSSFWorkbook 写 Excel 等于把整个 .xlsx 结构存在内存,必然崩。必须用 SXSSFWorkbook,它底层用临时文件缓存行,只在内存保最近 rowAccessWindowSize 行。

  • 初始化时传 new SXSSFWorkbook(1000),窗口设为 1000 行,比默认 100 更省 GC 压力
  • 每写满 10 万行主动调一次 workbook.dispose(),清理已刷盘的临时文件,防磁盘爆满
  • 别反复调 sheet.createRow(i) 跳着写,SXSSF 对稀疏行支持差,容易撑爆临时文件目录
  • 列宽、样式等尽量复用 CellStyle 对象,避免重复创建

绕过 Oracle DATE/TIMESTAMP 时区陷阱

Oracle 的 TIMESTAMP WITH TIME ZONE 字段用 rs.getTimestamp() 直接读,JDBC 默认按 JVM 时区转,导出到 Excel 后时间错乱,尤其跨时区部署时。

javascript-typescript-typescript-scaffold
javascript-typescript-typescript-scaffold

你是 TypeScript 项目架构专家,专注于脚手架搭建生产就绪的 Node.js 和前端应用。生成包含现代工具链(pnpm、Vite、Next.js)、类型

下载
  • 统一用 rs.getObject(colIndex, LocalDateTime.class) 或 ZonedDateTime.class,显式控制解析逻辑
  • 若字段是 DATE 类型(无时分秒),用 rs.getObject(colIndex, LocalDate.class),避免被自动补零点再转时区
  • Excel 单元格格式设为文本或自定义 yyyy-mm-dd,别依赖 Excel 自动识别,否则打开时可能二次转换

用临时表 + 分页减少长事务和锁等待

直接 SELECT * FROM huge_table 扫全表,Oracle 可能持锁太久,阻塞业务写入,且执行计划易走错。

  • 先导出条件生成临时表:CREATE GLOBAL TEMPORARY TABLE tmp_export AS SELECT ... WHERE ...,再从 tmp 表导出,避免长 SQL 锁主表
  • 真要分页查,别用 OFFSET/LIMIT(Oracle 12c+ 支持但性能差),改用 ROWNUM 嵌套或 FETCH FIRST + OFFSET 组合,且确保排序字段有索引
  • 每次分页查完立刻 rs.close() 和 statement.close(),释放服务器端游标资源,否则 Oracle 会累积大量 OPEN CURSOR

实际跑千万级时,最常卡住的不是代码逻辑,而是临时文件目录空间不足、JVM 堆外内存被 POI 的 TempFile 占满、或者 Oracle 端游标没及时释放——这些得盯着 /tmp、Native Memory Tracking 和 v$open_cursor 看。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

oracle excel java java代码

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

12437

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

9522

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

8112

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1304

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1048

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1556

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3269

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20491

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1415

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程