Java 字节流与字符流中 UTF-8 BOM 怎么识别

千枫同学_4441

千枫同学_4441

2026-11-15

517人浏览

原创

java 中识别 utf-8 bom 的标准做法是读取文件开头的三个字节,判断其是否等于 0xef 0xbb 0xbf。若匹配则跳过这三个字节继续处理正文;若不匹配则按普通 utf-8 流处理。推荐使用 bufferedreader 配合自定义的 inputstreamreader 或手动检测前缀来实现。

Java 字节流与字符流中 UTF-8 BOM 怎么识别

如何检测输入流的前三个字节是否为 BOM

通过 InputStream.mark() 和 read() 方法可以安全地检查流起始位置。具体实现时,创建一个包装类,在初始化时尝试读取三个字节并比对 BOM 值,如果匹配则记录已消费状态,后续读取时自动跳过。

Java 字节流与字符流中 UTF-8 BOM 怎么识别

import java.io.*;

public class BOMInputStream extends FilterInputStream {
    private boolean bomConsumed = false;
    private byte[] bomBytes = new byte[3];
    private int bytesRead = 0;

    public BOMInputStream(InputStream in) throws IOException {
        super(in);
        // 尝试读取 BOM
        int count = 0;
        while (count <p>实际开发中,建议使用 <code>PushbackInputStream</code> 来包裹原始输入流。在构造时读取三个字节,如果是 BOM 则丢弃(不 pushback),否则将这三个字节 pushback 回流中,确保后续读取器能正常读到文件头。</p><pre class="brush:php;toolbar:false;">import java.io.*;

public class SafeBOMReader {
    public static BufferedReader createReader(InputStream is, String charset) throws IOException {
        PushbackInputStream pbis = new PushbackInputStream(is, 3);
        byte[] bom = new byte[3];
        int n = pbis.read(bom, 0, 3);
        
        boolean hasBom = false;
        if (n == 3) {
            if (bom[0] == (byte)0xEF && bom[1] == (byte)0xBB && bom[2] == (byte)0xBF) {
                hasBom = true;
            } else {
                pbis.unread(bom, 0, n);
            }
        } else if (n > 0) {
            pbis.unread(bom, 0, n);
        }
        
        return new BufferedReader(new InputStreamReader(pbis, charset));
    }
}

调用 SafeBOMReader.createReader(inputStream, "UTF-8") 即可得到一个自动处理 BOM 的 BufferedReader。如果文件包含 BOM,它会被静默跳过;如果不包含,文件内容从第一行开始被正确读取。

JavaScript 测试模式
JavaScript 测试模式

使用 Jest、Vitest 和 Testing Library 实施全面的测试策略,包括单元测试、集成测试和端到端测试,涵盖模拟、测试夹具和测试驱动开发。在编

下载

为什么有些库会自动处理 BOM 而有些不会

不同 Java IO 库对 BOM 的处理策略不同。例如 java.nio.file.Files.newBufferedReader() 在某些 JDK 版本中会尝试检测 BOM 并调整解码器,但行为可能不一致。而传统的 FileReader 默认使用平台编码,完全忽略 UTF-8 BOM。第三方库如 Apache Commons IO 提供了 BOMInputStream 类专门用于此目的。

Java 字节流与字符流中 UTF-8 BOM 怎么识别

// 使用 Apache Commons IO (需引入依赖)
import org.apache.commons.io.input.BOMInputStream;
import java.io.FileInputStream;
import java.io.BufferedReader;
import java.io.InputStreamReader;

public class CommonsIOExample {
    public static void main(String[] args) throws Exception {
        try (BOMInputStream bomIn = new BOMInputStream(
                new FileInputStream("test.txt"),
                BOM.UTF8)) {
            try (BufferedReader reader = new BufferedReader(
                    new InputStreamReader(bomIn, "UTF-8"))) {
                String line = reader.readLine();
                System.out.println(line); // 第一行内容,不含 BOM 字符
            }
        }
    }
}

Apache Commons IO 的 BOMInputStream 内部实现了类似的逻辑,但封装更好,支持多种 BOM 类型(如 UTF-16 BE/LE)。对于新项目,优先推荐此类成熟库,避免重复造轮子导致边界情况处理错误。

当文件中存在非标准 BOM 或混合编码时会发生什么

如果文件开头不是标准的 EF BB BF,而是其他字节序列,BOMInputStream 或自定义检测逻辑会将其视为普通数据。此时,如果后续解码器仍按 UTF-8 解析,这些字节会被当作有效字符输出,可能导致首行出现乱码。例如,若文件以 FF FE 开头(UTF-16 LE BOM),UTF-8 解码器会将其解释为两个非法或多字节字符,造成显示异常。因此,识别 BOM 的前提是明确预期编码,并在检测失败时采取适当策略,如抛出异常或切换解码器。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java 字节

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

12637

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

9742

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

8272

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1324

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1048

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1576

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3309

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20551

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1435

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习