Json.NET Stream が大きな JSON ファイルを効率的にデシリアライズしてメモリ使用量を最小限に抑えるにはどうすればよいでしょうか?

Json.NET ストリーミング逆シリアル化: 大きな JSON ファイルの効率的な処理

同一のオブジェクトを多数含む巨大な JSON ファイルの場合、ファイル全体をメモリにロードしないようにすることが重要です。 Json.NET は、JSON コンテンツをストリームから直接逆シリアル化する方法を提供し、メモリ消費を大幅に削減します。

初期の試みと制限事項

ループ内でオブジェクトを直接逆シリアル化すると、ファイルが単一のオブジェクトとして扱われますが、ルート JSON リストが存在するために失敗します。 JSON を C# リストに逆シリアル化すると、項目を 1 つずつ読み取ることは可能ですが、リストには逆シリアル化されたすべてのオブジェクトが保持されるため、依然として大量のメモリを消費します。

ストリーミング逆シリアル化

ストリーム内のオブジェクトを順番に読み取るには、各オブジェクトの開始位置を特定し、それに応じて逆シリアル化する必要があります。これは、ループ内で reader.TokenType 属性を使用することで実現できます:

<code class="language-csharp">JsonSerializer serializer = new JsonSerializer();
MyObject o;
using (FileStream s = File.Open("bigfile.json", FileMode.Open))
using (StreamReader sr = new StreamReader(s))
using (JsonReader reader = new JsonTextReader(sr))
{
    while (reader.Read())
    {
        if (reader.TokenType == JsonToken.StartObject)
        {
            o = serializer.Deserialize<MyObject>(reader);
            // 处理对象 o
        }
    }
}</code>

このコードは、リーダーがオブジェクト ({) の先頭に遭遇した場合にのみ逆シリアル化します。他のマーカーをスキップすると、不必要な RAM を消費することなく、大きなファイルを効率的に解析できます。 // 处理对象 o コメントは、読み取られた MyObject オブジェクトが逆シリアル化後に実際に処理される必要があることを読者に知らせるためにコードに追加されます。

以上がJson.NET Stream が大きな JSON ファイルを効率的にデシリアライズしてメモリ使用量を最小限に抑えるにはどうすればよいでしょうか?の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。