Json.NET流式反序列化:高效處理大型JSON檔
對於包含大量相同物件的巨大JSON文件,避免將整個文件加載到記憶體中至關重要。 Json.NET提供了一種直接從流中反序列化JSON內容的方法,顯著降低記憶體消耗。
初始嘗試及限制
直接在循環中反序列化物件會將文件視為單一對象,由於存在根JSON列表,這種方法會失敗。將JSON反序列化為C#列表雖然可以逐個讀取項目,但仍然會消耗大量內存,因為列表會保存所有已反序列化的物件。
流式反序列化
為了順序讀取流中的對象,需要識別每個對象的起始位置並進行相應的反序列化。這可以透過在循環中使用reader.TokenType
屬性來實現:
<code class="language-csharp">JsonSerializer serializer = new JsonSerializer(); MyObject o; using (FileStream s = File.Open("bigfile.json", FileMode.Open)) using (StreamReader sr = new StreamReader(s)) using (JsonReader reader = new JsonTextReader(sr)) { while (reader.Read()) { if (reader.TokenType == JsonToken.StartObject) { o = serializer.Deserialize<MyObject>(reader); // 处理对象 o } } }</code>
此程式碼僅在讀取器遇到物件開頭({)時才進行反序列化。跳過其他標記確保高效解析大型文件,而不會消耗不必要的RAM。 程式碼中加入了// 处理对象 o
的註釋,提醒讀者在反序列化後需要對讀取到的MyObject
物件進行實際處理。
以上是Json.NET Stream 如何高效反序列化大型 JSON 檔案以最小化記憶體使用?的詳細內容。更多資訊請關注PHP中文網其他相關文章!