首頁 >後端開發 >C++ >Json.NET Stream 如何高效反序列化大型 JSON 檔案以最小化記憶體使用?

Json.NET Stream 如何高效反序列化大型 JSON 檔案以最小化記憶體使用?

Susan Sarandon
Susan Sarandon原創
2025-01-19 01:42:09969瀏覽

How Can Json.NET Stream Deserialize Large JSON Files Efficiently to Minimize Memory Usage?

Json.NET流式反序列化:高效處理大型JSON檔

對於包含大量相同物件的巨大JSON文件,避免將整個文件加載到記憶體中至關重要。 Json.NET提供了一種直接從流中反序列化JSON內容的方法,顯著降低記憶體消耗。

初始嘗試及限制

直接在循環中反序列化物件會將文件視為單一對象,由於存在根JSON列表,這種方法會失敗。將JSON反序列化為C#列表雖然可以逐個讀取項目,但仍然會消耗大量內存,因為列表會保存所有已反序列化的物件。

流式反序列化

為了順序讀取流中的對象,需要識別每個對象的起始位置並進行相應的反序列化。這可以透過在循環中使用reader.TokenType屬性來實現:

<code class="language-csharp">JsonSerializer serializer = new JsonSerializer();
MyObject o;
using (FileStream s = File.Open("bigfile.json", FileMode.Open))
using (StreamReader sr = new StreamReader(s))
using (JsonReader reader = new JsonTextReader(sr))
{
    while (reader.Read())
    {
        if (reader.TokenType == JsonToken.StartObject)
        {
            o = serializer.Deserialize<MyObject>(reader);
            // 处理对象 o
        }
    }
}</code>

此程式碼僅在讀取器遇到物件開頭({)時才進行反序列化。跳過其他標記確保高效解析大型文件,而不會消耗不必要的RAM。 程式碼中加入了// 处理对象 o的註釋,提醒讀者在反序列化後需要對讀取到的MyObject物件進行實際處理。

以上是Json.NET Stream 如何高效反序列化大型 JSON 檔案以最小化記憶體使用?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn