如何在.NET中高效讀取1GB文字檔？

如何在.NET 中讀取海量文字檔案（1 GB）

高效存取大型文字檔案是資料處理中的一項關鍵任務和分析。在.NET中，有許多技術可以讀取海量文字文件，包括MemoryMappedFile和StreamReader.ReadLine。

MemoryMappedFile

對於.NET 4.0以上版本，MemoryMappedFile提供了最佳化讀取大檔案的效能。它創建一個記憶體映射文件，允許直接記憶體存取該文件而無需中間緩衝。這消除了多次磁碟讀取的需要並顯著提高了效能。

要使用MemoryMappedFile：

using System.IO.MemoryMappedFiles;

public static void ReadTxtFileUsingMemoryMappedFile()
{
    string filePath = string.Empty;
    // Get file path from user or other source
    using (MemoryMappedFile mmf = MemoryMappedFile.CreateFromFile(filePath))
    {
        byte[] buffer = new byte[mmf.Capacity];
        mmf.CreateViewAccessor().ReadArray(0, buffer, 0, buffer.Length);
        string data = System.Text.Encoding.UTF8.GetString(buffer);
        // Parse or process the data
    }
}

StreamReader.ReadLine

如果您如果不使用.NET 4.0 或者更喜歡更簡單的方法，您可以使用StreamReader.ReadLine。此方法從文件中讀取一行文字並將其作為字串傳回。雖然它可能比 MemoryMappedFile 慢，但它是一個簡單且可靠的選項。

要使用 StreamReader.ReadLine：

using System.IO;

public static void ReadTxtFileUsingStreamReader()
{
    string filePath = string.Empty;
    // Get file path from user or other source
    using (StreamReader sr = new StreamReader(filePath))
    {
        string line;
        while ((line = sr.ReadLine()) != null)
        {
            // Parse or process the line
        }
    }
}

選擇最佳方法取決於您的特定要求。如果效能至關重要且您使用的是 .NET 4.0，則強烈建議使用 MemoryMappedFile。另外，StreamReader.ReadLine 提供了一個簡單可靠的解決方案來讀取大量文字檔案。

以上是如何在.NET中高效讀取1GB文字檔？的詳細內容。更多資訊請關注PHP中文網其他相關文章！