Comment puis-je lire efficacement un fichier texte volumineux dans .NET ?

Lecture efficace de fichiers texte volumineux dans .NET

Lors de la gestion de fichiers texte volumineux, les performances de leur lecture ligne par ligne deviennent essentielles. Cet article traite de l'approche optimale pour lire un fichier texte de 1 Go dans .NET.

Utilisation de StreamReader

Une méthode largement utilisée pour lire des fichiers texte dans .NET est StreamReader. .LireLigne. Cependant, ce n'est pas l'approche la plus optimale pour les fichiers volumineux, car elle lit l'intégralité du fichier en mémoire, ce qui peut être gourmand en ressources.

MemoryMappedFiles pour les fichiers volumineux

Dans .NET 4.0 et versions ultérieures, envisagez d’utiliser MemoryMappedFile. Cette classe est spécialement conçue pour gérer efficacement les fichiers volumineux. Il vous permet de créer un fichier mappé en mémoire, ce qui rend une partie du fichier accessible depuis la mémoire. Cela évite la surcharge liée à la lecture de l'intégralité du fichier en mémoire, améliorant considérablement les performances.

Exemple de code

Le code suivant montre comment lire un fichier texte volumineux à l'aide de MemoryMappedFile :

using System.IO.MemoryMappedFiles;

// Create a memory-mapped file object
MemoryMappedFile mmf = MemoryMappedFile.CreateFromFile(filePath, FileMode.Open, "MyMappedFile");

// Create a memory-mapped view to the file contents
MemoryMappedViewAccessor view = mmf.CreateViewAccessor();

// Read the file line by line using a byte array
byte[] buffer = new byte[1024];
int bytesRead;
while ((bytesRead = view.Read(buffer, 0, buffer.Length)) != 0)
{
    // Convert the buffer to a string
    string line = System.Text.Encoding.UTF8.GetString(buffer, 0, bytesRead);

    // Process the line as needed
}

Conclusion

Pendant StreamReader.ReadLine peut suffire pour les petits fichiers texte, MemoryMappedFiles offre des performances nettement meilleures pour les gros fichiers. En évitant la surcharge liée au chargement de l'intégralité du fichier en mémoire, cela permet un traitement plus rapide et plus efficace.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!