텍스트 파일의 대용량 데이터 쓰기 속도 향상
대량 데이터 세트를 처리할 때는 텍스트 파일의 쓰기 성능을 최적화하는 것이 중요합니다. BufferedWriter를 사용하는 것은 일반적인 기술이지만 항상 원하는 효율성을 제공하지는 않습니다. 이 기사에서는 Java에서 데이터 쓰기를 가속화하는 대체 접근 방식을 살펴봅니다.
직접 FileWriter 사용
BufferedWriter는 데이터 쓰기에 대한 버퍼링 접근 방식을 제공합니다. 그러나 이 버퍼를 우회하면 쓰기가 일반적으로 드라이브 메모리에 캐시되는 최신 시스템에서 속도가 잠재적으로 향상될 수 있습니다. 이를 달성하려면 코드에서 BufferedWriter를 FileWriter로 바꾸면 됩니다.
실증적 테스트
실증적 테스트를 통해 직접 FileWriter를 사용하면 성능이 크게 향상되는 것으로 나타났습니다. 175MB(400만 개의 문자열) 데이터 세트의 경우 BufferedWriter 없이 쓰는 데 듀얼 코어 시스템에서 약 4~5초가 걸렸습니다. 이는 BufferedWriter로 관찰된 초기 40초 기간에 비해 상당한 개선을 나타냅니다.
쓰기 성능 측정
실증적 증거를 제공하기 위해 다음 코드 블록은 성능 테스트를 보여줍니다. 다양한 버퍼 크기와 직접 BufferedWriter를 사용하여 쓰기 시간을 비교합니다. FileWriter:
import java.io.BufferedWriter; import java.io.File; import java.io.FileWriter; import java.io.IOException; import java.io.Writer; import java.util.ArrayList; import java.util.List; public class FileWritingPerfTest { // ... private static void writeRaw(List<String> records) throws IOException { File file = File.createTempFile("foo", ".txt"); try { FileWriter writer = new FileWriter(file); System.out.print("Writing raw... "); write(records, writer); } finally { file.delete(); } } private static void writeBuffered(List<String> records, int bufSize) throws IOException { File file = File.createTempFile("foo", ".txt"); try { FileWriter writer = new FileWriter(file); BufferedWriter bufferedWriter = new BufferedWriter(writer, bufSize); System.out.print("Writing buffered (buffer size: " + bufSize + ")... "); write(records, bufferedWriter); } finally { file.delete(); } } private static void write(List<String> records, Writer writer) throws IOException { long start = System.currentTimeMillis(); for (String record: records) { writer.write(record); } writer.close(); long end = System.currentTimeMillis(); System.out.println((end - start) / 1000f + " seconds"); } // ... }
결론
실험 결과는 직접 FileWriter를 사용하면 대규모 데이터 세트의 쓰기 성능을 크게 향상시킬 수 있음을 보여줍니다. 이 기술은 쓰기 속도가 중요한 시나리오에 특히 유용합니다. 개발자는 이러한 결과를 활용하여 코드를 최적화하여 텍스트 파일의 대용량 데이터를 효율적으로 처리할 수 있습니다.
위 내용은 Java에서 대용량 텍스트 파일을 작성하기 위해 Direct FileWriter를 사용하는 것이 BufferedWriter보다 더 빠릅니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!