Java 中文件操作怎么实现大文本文件的倒序按行读取行为

星墨酱_9622

星墨酱_9622

2026-07-26

234人浏览

原创

java中倒序读取大文本文件的核心是反向字节扫描定位换行符,用randomaccessfile从末尾逐字节回退识别\n、\r\n或\r,确定每行起始偏移后读取,避免oom;推荐使用apache commons io的reversedlinesfilereader。

java 中文件操作怎么实现大文本文件的倒序按行读取行为

Java 中实现大文本文件的倒序按行读取,核心思路不是一次性加载全部内容到内存,而是从文件末尾开始逐字节反向扫描,识别换行符(\n 或 \r\n),定位每行起始位置,再用 RandomAccessFile 或 FileChannel 跳转读取。这样可避免 OOM,支持 GB 级文件。

用 RandomAccessFile 从尾部反向扫描

这是最常用且可控的方式。关键点在于:文件指针从 length()-1 开始向前移动,跳过末尾可能的空白或换行符,遇到换行符就截出一行。

  • 先调用 raf.seek(raf.length() - 1) 定位到最后一个字节
  • 用循环递减位置,跳过连续的 \n 和 \r(处理 Windows/Linux/Mac 换行差异)
  • 找到换行符后,当前指针 +1 就是本行起始偏移;若没找到换行符但已到开头,则整行从 0 开始
  • 用 raf.readLine() 不可靠(它正向读且不支持指定 offset),应改用 raf.seek(start); byte[] buf = new byte[length]; raf.read(buf) 配合 new String(buf, charset)

处理不同换行符和编码问题

纯 ASCII 换行符(\n)较简单,但实际文件可能含 \r\n(Windows)或 \r(旧 Mac)。UTF-8 下中文不会干扰换行判断,但必须统一用相同 charset 解码。

Java Maven Code Review
Java Maven Code Review

审查Java Maven项目(ZIP压缩包或GitLab仓库URL),检查代码规范、命名、模块边界、可维护性问题以及重复代码。

下载
  • 扫描时只判断字节值:0x0A(\n)、0x0D(\r),不依赖字符串操作
  • 读取每行字节后,明确指定 charset(如 StandardCharsets.UTF_8),避免平台默认编码导致乱码
  • 注意 BOM:UTF-8 文件开头若有 EF BB BF,不影响倒序读,但首行读取时需跳过(可在首次读取后判断并忽略)

封装成可迭代的倒序行读取器

为便于使用,可封装为实现了 Iterator<string></string> 的类,内部维护 RandomAccessFile 和当前文件指针位置。

  • 构造时打开文件,获取 length(),初始化指针为 length - 1
  • hasNext() 判断是否还有未读行(指针 > 0 且未到文件头)
  • next() 执行一次完整倒序查找:回退找换行、确定区间、读取、更新指针
  • 务必在 close() 或 try-with-resources 中释放 RandomAccessFile,防止句柄泄漏

替代方案:使用 Apache Commons IO 的 ReversedLinesFileReader

如果项目已引入 commons-io,可直接用 ReversedLinesFileReader —— 它内部正是基于 RandomAccessFile 实现,已处理换行符兼容性、编码、边界情况。

  • 创建简单:new ReversedLinesFileReader(file, StandardCharsets.UTF_8)
  • 使用自然:while ((line = reader.readLine()) != null) { ... }
  • 注意:它缓存了部分缓冲区,但仍属低内存占用;不支持跳过空行等高级过滤,需自行包装

不复杂但容易忽略细节:换行符判断必须字节级、编码必须显式指定、资源必须及时关闭。手动实现适合学习和定制,生产环境推荐优先用成熟工具类。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

9877

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

7022

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

6192

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1064

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

888

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1296

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2589

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

19911

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1155

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习