Wie kann Json.NET die JSON-Deserialisierung streamen, um große Dateien effizient zu verarbeiten?

Effiziente Verarbeitung großer JSON-Dateien: Json.NET-Streaming-Deserialisierung

Effizientes Parsen ist entscheidend, wenn es um große JSON-Datensätze geht, die nicht vollständig in den Speicher geladen werden können. Json.NET bietet über sein JsonReader eine leistungsstarke Streaming-JSON-Datenverarbeitungslösung.

Problemübersicht

Eine JSON-Datei enthält eine Folge identischer Objekte. Das Ziel besteht darin, jeweils ein Objekt zu lesen, ohne die gesamte Datei in den Speicher zu laden.

Fehlgeschlagener Versuch

Anfänglich führte der Versuch, die Datei zu deserialisieren, zu einer Ausnahme, da ein JSON-Array und kein Objekt erwartet wurde. Das Deserialisieren des Arrays in eine Liste löste den Fehler, führte jedoch zu einem hohen Speicherverbrauch.

Streaming-Lösungen

Um diese Einschränkungen zu umgehen, liest die vorgeschlagene Lösung die JSON-Datei Zeichen für Zeichen und deserialisiert das Objekt nur, wenn der Leser auf das Zeichen „{“ stößt, das den Anfang des Objekts angibt.

Codebeispiel

Hier ist der optimierte Code zum Streamen einer JSON-Datei mit JsonReader:

<code class="language-csharp">JsonSerializer serializer = new JsonSerializer();
MyObject o;
using (FileStream s = File.Open("bigfile.json", FileMode.Open))
using (StreamReader sr = new StreamReader(s))
using (JsonReader reader = new JsonTextReader(sr))
{
    while (reader.Read())
    {
        // 仅当流中存在 "{" 字符时才反序列化
        if (reader.TokenType == JsonToken.StartObject)
        {
            o = serializer.Deserialize<MyObject>(reader);
            // 对 o 对象进行处理
        }
    }
}</code>

Dieser Code liest die Datei effizient und deserialisiert Objekte, sobald sie im Stream angetroffen werden, ohne zu viel RAM zu beanspruchen. Beachten Sie, dass myobject durch Ihren tatsächlichen Objekttyp MyObject ersetzt werden sollte. Dem Code wurde die Behandlung von o-Objekten hinzugefügt, sodass jedes Objekt nach der Deserialisierung manipuliert werden kann.

Das obige ist der detaillierte Inhalt vonWie kann Json.NET die JSON-Deserialisierung streamen, um große Dateien effizient zu verarbeiten?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!