메모리에 로드하지 않고 JSON에서 대규모 데이터 스트림을 효율적으로 마샬링하는 방법은 무엇입니까?

메모리에 로드하지 않고 JSON에서 대규모 데이터 스트림 마샬링

대규모 데이터 스트림을 JSON으로 인코딩해야 하는 경우가 자주 발생하지만 전체 한 번에 메모리로 스트리밍하는 것은 비현실적일 수 있습니다. 이 기사에서는 내장된 json.Marshaler 인터페이스 없이 이 문제를 극복하는 방법을 살펴봅니다.

json.Encoder를 사용한 인코딩: 제한 사항

대규모 스트림 인코딩 시도 json.Encoder를 사용한 데이터는 메모리의 채널(chan 문자열)을 처리할 수 없기 때문에 실패합니다.

사용자 정의 JSON 인코딩

적절한 빌드가 없는 경우 - 솔루션에서는 사용자 정의 JSON 인코딩이 필요합니다. 여기에는 아래 스니펫에 설명된 대로 JSON 문자열을 수동으로 구축하는 작업이 포함됩니다.

w := os.Stdout
w.WriteString(`{ "Foo": "` + t.Foo + `", "Bar": [`)

for x := range t.Bar {
    _ = json.NewEncoder(w).Encode(x)
    w.WriteString(`,`)
}

w.WriteString(`]}`)

채널 지원을 위한 인코딩/json 확장

encoding/json 패키지를 향상하려면 채널 지원을 통해 인코딩/json/encode.go에서 ReflectValueQuoted 함수를 수정할 수 있습니다. 특히 다음과 유사한 채널에 대한 사례를 추가합니다.

case reflect.Chan:
    e.WriteByte('[')
    i := 0
    for {
        x, ok := v.Recv()
        if !ok {
            break
        }
        if i > 0 {
            e.WriteByte(',')
        }
        e.reflectValue(x)
        i++
    }
    e.WriteByte(']')

결론

encoding/json 패키지는 현재 채널 인코딩을 지원하지 않지만 이 문서에서는 JSON에서 대규모 데이터 스트림을 효율적으로 마샬링하기 위한 대체 접근 방식입니다. 사용자 정의 인코딩을 사용하면 데이터를 JSON 출력으로 직접 스트리밍할 수 있으며, 인코딩/json을 확장하면 더욱 강력한 솔루션이 제공됩니다.

위 내용은 메모리에 로드하지 않고 JSON에서 대규모 데이터 스트림을 효율적으로 마샬링하는 방법은 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!