使用 Direct FileWriter 在 Java 中写入大型文本文件比 BufferedWriter 更快吗？

提高文本文件中大数据的写入速度

在处理大量数据集时，优化文本文件的写入性能至关重要。虽然使用 BufferedWriter 是一种常见技术，但它可能并不总能提供所需的效率。本文探讨了在 Java 中加速数据写入的替代方法。

直接 FileWriter 用法

BufferedWriter 提供了一种写入数据的缓冲方法。但是，绕过此缓冲区可能会提高现代系统的速度，在现代系统中，写入通常会缓存到驱动器的内存中。要实现此目的，只需在代码中将 BufferedWriter 替换为 FileWriter。

经验测试

经验测试表明使用直接 FileWriter 可以显着提高性能。对于 175MB（400 万字符串）的数据集，在双核系统上不使用 BufferedWriter 进行写入大约需要 4-5 秒。这比使用 BufferedWriter 观察到的初始 40 秒持续时间有了显着改进。

写入性能测量

为了提供经验证据，以下代码块展示了性能测试比较使用不同缓冲区大小的 BufferedWriter 和直接的写入时间FileWriter:

import java.io.BufferedWriter;
import java.io.File;
import java.io.FileWriter;
import java.io.IOException;
import java.io.Writer;
import java.util.ArrayList;
import java.util.List;

public class FileWritingPerfTest {

    // ...

    private static void writeRaw(List<String> records) throws IOException {
        File file = File.createTempFile("foo", ".txt");
        try {
            FileWriter writer = new FileWriter(file);
            System.out.print("Writing raw... ");
            write(records, writer);
        } finally {
            file.delete();
        }
    }

    private static void writeBuffered(List<String> records, int bufSize) throws IOException {
        File file = File.createTempFile("foo", ".txt");
        try {
            FileWriter writer = new FileWriter(file);
            BufferedWriter bufferedWriter = new BufferedWriter(writer, bufSize);

            System.out.print("Writing buffered (buffer size: " + bufSize + ")... ");
            write(records, bufferedWriter);
        } finally {
            file.delete();
        }
    }

    private static void write(List<String> records, Writer writer) throws IOException {
        long start = System.currentTimeMillis();
        for (String record: records) {
            writer.write(record);
        }
        writer.close(); 
        long end = System.currentTimeMillis();
        System.out.println((end - start) / 1000f + " seconds");
    }

    // ...
}

结论

实验结果表明，使用直接 FileWriter 可以显着提高大型数据集的写入性能。该技术对于写入速度至关重要的场景特别有用。通过利用这些发现，开发人员可以优化其代码，以有效处理文本文件中的大量数据。

以上是使用 Direct FileWriter 在 Java 中写入大型文本文件比 BufferedWriter 更快吗？的详细内容。更多信息请关注PHP中文网其他相关文章！