> 백엔드 개발 > Golang > 바이트 파일을 int64 슬라이스로 읽는 가장 효율적인 방법은 무엇입니까?

바이트 파일을 int64 슬라이스로 읽는 가장 효율적인 방법은 무엇입니까?

PHPz
풀어 주다: 2024-02-09 11:36:09
앞으로
968명이 탐색했습니다.

将字节文件读入 int64 切片的最有效方法是什么?

PHP 편집자 Zimo는 "바이트 파일을 int64 슬라이스로 읽는 가장 효과적인 방법은 무엇입니까?"라는 일반적인 질문에 답하기 위해 왔습니다. 바이트 파일을 int64 슬라이스로 읽어야 할 때 다음 접근 방식을 사용할 수 있습니다. 먼저 file_get_contents 함수를 사용하여 바이트 파일을 읽은 다음 unpack 함수를 사용하여 바이트 파일을 int64 슬라이스로 압축을 풉니다. 이 방법은 간단하고 효율적이며 필요에 맞게 바이트 파일을 int64 슬라이스로 빠르게 변환할 수 있습니다. 이 방법이 모두에게 도움이 되기를 바랍니다!

질문 내용

int64 파일이 여러 개 압축되어 있습니다. int64 슬라이스로 메모리에 필요합니다. 문제는 합쳐진 파일이 기기 메모리 크기의 절반을 초과하므로 공간이 제한된다는 것입니다. Go의 표준 옵션은 다음과 같습니다:

으아악

안타깝게도 binary 包将立即分配一个大小为 f.size()*8[]byte 메모리가 부족합니다.

각 바이트를 한 번에 하나씩 읽고 슬라이스에 복사하면 작동하지만 너무 느립니다.

이상적인 상황은 []byte 直接转换为 []int64을 사용하고 컴파일러에게 "좋아, 이것들은 이제 정수야"라고 말하는 것이지만 분명히 그것은 작동하지 않습니다. 비슷한 일을 할 수 있는 방법이 있나요? 안전하지 않은 패키지를 사용하거나 꼭 필요할 때 c를 넣을 수도 있습니다.

해결 방법

몇 개의 int64 파일이 압축되어 있습니다. int64 슬라이스로 메모리에 필요합니다. 문제는 합쳐진 파일이 기기 메모리 크기의 절반을 초과하므로 공간이 제한된다는 것입니다.

go의 표준 옵션은 다음과 같습니다:

으아악

안타깝게도 바이너리 패키지는 f.size()*8 크기의 []바이트를 즉시 할당하고 메모리가 부족해집니다.

모든 기능은 최소한의 메모리를 사용합니다.

으아악

예를 들어 amd64(littleendian) 아키텍처와 littleendian 데이터로 최대 효율성을 얻으려면(데이터 변환이 필요하지 않음) readfileint64se를 사용하세요.

바이트 순서 오류 - Rob Pike
https://commandcenter.blogspot.com/2012/04/byte-order-fallacy.html

으아악 으아악

위 내용은 바이트 파일을 int64 슬라이스로 읽는 가장 효율적인 방법은 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

원천:stackoverflow.com
본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
인기 튜토리얼
더>
최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿