>  기사  >  백엔드 개발  >  ## io.Copy()로 복사하면 희소 파일이 커지는 이유는 무엇입니까?

## io.Copy()로 복사하면 희소 파일이 커지는 이유는 무엇입니까?

Patricia Arquette
Patricia Arquette원래의
2024-10-26 04:03:27824검색

##  Why Do Sparse Files Become Large When Copied with io.Copy()?

io.Copy()를 사용하여 복사하면 희소 파일이 계속 커짐

io.Copy()를 사용하여 희소 파일을 복사하면 예기치 않게 크기가 커집니다. 목적지에는 크다. 이를 방지하려면 어떻게 해야 합니까?

Background

io.Copy()는 희소 파일 속성을 인식하지 못한 채 원시 바이트를 전송합니다. 스파스 파일은 데이터에 구멍이 있는 상태로 효율적으로 저장됩니다. io.Copy()는 이 구멍 정보를 전달할 수 없으므로 복사 프로세스 중에 희박성이 손실됩니다.

해결책

이 문제를 해결하려면 우회해야 합니다. io.Copy()를 사용하여 syscall 패키지로 직접 작업합니다. 방법은 다음과 같습니다.

  • 구멍 감지: lseek(2)의 SEEK_HOLE 및 SEEK_DATA 특수 값을 사용하여 희소 파일 내에서 구멍과 데이터 영역을 찾습니다.
  • 탐색 값 사용자 정의: 플랫폼별 SEEK_HOLE 및 SEEK_DATA 값이 필요합니다. 지원되는 플랫폼에 대해 다음 값을 결정합니다.
  • 읽기 패턴 수정: 데이터가 포함된 영역을 식별하고 해당 영역에서 데이터를 읽습니다.
  • 파일 펀칭을 고려합니다. Linux에서는 fallocate(2)를 사용하여 대상 파일 끝에 구멍을 뚫을 수 있습니다. 지원되지 않는 경우 제로 블록을 작성하여 홀을 시뮬레이션합니다.

추가 고려 사항

  • 파일 시스템 지원: 모든 파일 시스템이 지원되는 것은 아닙니다. FAT32와 같은 구멍. 대상 파일 시스템이 홀을 지원하는지 확인하세요.
  • 소스와 대상의 차이점: 소스와 대상 파일이 동일한 파일 시스템에 있는지 확인하세요. 그렇다면 syscall.Rename() 또는 os.Rename()을 사용하여 복사하지 않고 파일을 이동하는 것을 고려해 보세요.

자세한 내용은 tar 아카이브에 스파스 파일 작성에 대한 Go 문제 #13548을 참조하세요. .

위 내용은 ## io.Copy()로 복사하면 희소 파일이 커지는 이유는 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명:
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.