백엔드 개발 Golang ## io.Copy()로 복사하면 희소 파일이 커지는 이유는 무엇입니까?

## io.Copy()로 복사하면 희소 파일이 커지는 이유는 무엇입니까?

Oct 26, 2024 am 04:03 AM

##  Why Do Sparse Files Become Large When Copied with io.Copy()?

io.Copy()를 사용하여 복사하면 희소 파일이 계속 커짐

io.Copy()를 사용하여 희소 파일을 복사하면 예기치 않게 크기가 커집니다. 목적지에는 크다. 이를 방지하려면 어떻게 해야 합니까?

Background

io.Copy()는 희소 파일 속성을 인식하지 못한 채 원시 바이트를 전송합니다. 스파스 파일은 데이터에 구멍이 있는 상태로 효율적으로 저장됩니다. io.Copy()는 이 구멍 정보를 전달할 수 없으므로 복사 프로세스 중에 희박성이 손실됩니다.

해결책

이 문제를 해결하려면 우회해야 합니다. io.Copy()를 사용하여 syscall 패키지로 직접 작업합니다. 방법은 다음과 같습니다.

  • 구멍 감지: lseek(2)의 SEEK_HOLE 및 SEEK_DATA 특수 값을 사용하여 희소 파일 내에서 구멍과 데이터 영역을 찾습니다.
  • 탐색 값 사용자 정의: 플랫폼별 SEEK_HOLE 및 SEEK_DATA 값이 필요합니다. 지원되는 플랫폼에 대해 다음 값을 결정합니다.
  • 읽기 패턴 수정: 데이터가 포함된 영역을 식별하고 해당 영역에서 데이터를 읽습니다.
  • 파일 펀칭을 고려합니다. Linux에서는 fallocate(2)를 사용하여 대상 파일 끝에 구멍을 뚫을 수 있습니다. 지원되지 않는 경우 제로 블록을 작성하여 홀을 시뮬레이션합니다.

추가 고려 사항

  • 파일 시스템 지원: 모든 파일 시스템이 지원되는 것은 아닙니다. FAT32와 같은 구멍. 대상 파일 시스템이 홀을 지원하는지 확인하세요.
  • 소스와 대상의 차이점: 소스와 대상 파일이 동일한 파일 시스템에 있는지 확인하세요. 그렇다면 syscall.Rename() 또는 os.Rename()을 사용하여 복사하지 않고 파일을 이동하는 것을 고려해 보세요.

자세한 내용은 tar 아카이브에 스파스 파일 작성에 대한 Go 문제 #13548을 참조하세요. .

위 내용은 ## io.Copy()로 복사하면 희소 파일이 커지는 이유는 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

뜨거운 기사 태그

메모장++7.3.1

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

Go Language Pack 가져 오기 : 밑줄과 밑줄이없는 밑줄의 차이점은 무엇입니까? Go Language Pack 가져 오기 : 밑줄과 밑줄이없는 밑줄의 차이점은 무엇입니까? Mar 03, 2025 pm 05:17 PM

Go Language Pack 가져 오기 : 밑줄과 밑줄이없는 밑줄의 차이점은 무엇입니까?

Beego 프레임 워크에서 페이지간에 단기 정보 전송을 구현하는 방법은 무엇입니까? Beego 프레임 워크에서 페이지간에 단기 정보 전송을 구현하는 방법은 무엇입니까? Mar 03, 2025 pm 05:22 PM

Beego 프레임 워크에서 페이지간에 단기 정보 전송을 구현하는 방법은 무엇입니까?

이동 중에 테스트를 위해 모의 개체와 스터브를 작성하려면 어떻게합니까? 이동 중에 테스트를 위해 모의 개체와 스터브를 작성하려면 어떻게합니까? Mar 10, 2025 pm 05:38 PM

이동 중에 테스트를 위해 모의 개체와 스터브를 작성하려면 어떻게합니까?

추적 도구를 사용하여 GO 응용 프로그램의 실행 흐름을 이해하려면 어떻게해야합니까? 추적 도구를 사용하여 GO 응용 프로그램의 실행 흐름을 이해하려면 어떻게해야합니까? Mar 10, 2025 pm 05:36 PM

추적 도구를 사용하여 GO 응용 프로그램의 실행 흐름을 이해하려면 어떻게해야합니까?

MySQL 쿼리 결과 목록을 GO 언어로 사용자 정의 구조 슬라이스로 변환하는 방법은 무엇입니까? MySQL 쿼리 결과 목록을 GO 언어로 사용자 정의 구조 슬라이스로 변환하는 방법은 무엇입니까? Mar 03, 2025 pm 05:18 PM

MySQL 쿼리 결과 목록을 GO 언어로 사용자 정의 구조 슬라이스로 변환하는 방법은 무엇입니까?

GO에서 제네릭에 대한 사용자 정의 유형 제약 조건을 어떻게 정의 할 수 있습니까? GO에서 제네릭에 대한 사용자 정의 유형 제약 조건을 어떻게 정의 할 수 있습니까? Mar 10, 2025 pm 03:20 PM

GO에서 제네릭에 대한 사용자 정의 유형 제약 조건을 어떻게 정의 할 수 있습니까?

편리하게 GO 언어로 파일을 작성하는 방법? 편리하게 GO 언어로 파일을 작성하는 방법? Mar 03, 2025 pm 05:15 PM

편리하게 GO 언어로 파일을 작성하는 방법?

Linters 및 정적 분석 도구를 사용하여 GO 코드의 품질과 유지 관리를 향상시킬 수 있습니까? Linters 및 정적 분석 도구를 사용하여 GO 코드의 품질과 유지 관리를 향상시킬 수 있습니까? Mar 10, 2025 pm 05:38 PM

Linters 및 정적 분석 도구를 사용하여 GO 코드의 품질과 유지 관리를 향상시킬 수 있습니까?

See all articles