Java에서 대용량 JSON 파일 처리

최신 애플리케이션에서는 효율적인 JSON 파일 처리가 중요합니다. JSON 파일의 크기가 큰 경우 메모리 부족 오류와 과도한 리소스 소비를 방지하기 위해 적절하게 처리해야 합니다.

GSON은 JSON 파일을 처리하기 위해 Java에서 사용할 수 있는 최고의 라이브러리 중 하나입니다.

• 동일한 객체를 재사용하여 여러 요청을 처리할 수 있도록 스레드로부터 안전한 인스턴스를 제공합니다.

• 특별한 경우가 아닌 이상 직렬화 및 역직렬화에 주석을 사용할 수 없을 것으로 예상됩니다.

• 직렬화 및 역직렬화를 위한 toJson() 및 fromJson() 메서드를 제공합니다.

• 스트림 리더를 사용하여 콘텐츠를 읽을 수 있도록 지원합니다.

아래는 Java 스트림 리더를 사용하여 파일을 읽고 Java 객체로 변환하는 코드 조각입니다. 나는 100개의 레코드마다 비즈니스 논리를 적용하고 있습니다.

가정 JSON 파일에는 아래와 같은 데이터 배열이 있습니다.

[
{
"id": 1,
"firstName": "에밀리",
"성": "존슨"
}
]

자바 코드

private Optional<Boolean> readFile(String path) {
    try (InputStream inputStream = Files.newInputStream(Path.of(path));
         JsonReader reader = new JsonReader(new InputStreamReader(inputStream))) {
        Instant start = Instant.now();
        reader.beginArray();
        List<User> users = new ArrayList<>();
        while (reader.hasNext()) {
            users.add(gson.fromJson(reader, User.class));
            if (users.size() >= 100) {
                //Initiate your records processing
                //You can consider processing it async way handling failure scenarios properly
                users.clear();
            }
        }
        reader.endArray();
        LOGGER.info("Total time taken to process file:{}, Duration:{} (millis)", path, Duration.between(start, Instant.now()).toMillis());
    } catch (Exception e) {
        LOGGER.error("", e);
        return Optional.of(false);
    }
    return Optional.of(true);
}

위 내용은 Java에서 대용량 JSON 파일 처리의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!