블록 크기가 가정용 NAS의 사진, 데이터베이스 및 아카이브에 어떤 영향을 미치나요?

블록 크기는 사진, 데이터베이스, 아카이브가 저장소에 데이터를 이동하고 다시 쓰도록 요청하는 방식이 근본적으로 다르기 때문에 홈 NAS의 동작 방식을 변경합니다.

이 용어는 파일시스템 할당 블록, 카피 온 라이트 기록, 데이터베이스 페이지 또는 아카이브 프로그램의 전송 기록을 의미할 수 있습니다. 이 단위들은 상호작용하지만 서로 교환 가능하지는 않습니다. 큰 사진 아카이브에 대한 메타데이터 작업을 줄이는 설정은 몇 킬로바이트씩 변경하는 데이터베이스에 대해 읽기-수정-쓰기 비용을 증가시킬 수 있습니다.

블록 크기는 할당 및 재작성 단위를 설정합니다

파일시스템은 공간 할당을 위한 최소 단위가 필요합니다. 파일이 최종 블록의 일부만 사용하면 나머지는 슬랙 공간이 됩니다. 작은 블록은 작은 파일의 낭비를 줄이고, 큰 블록은 동일한 큰 파일을 설명하는 할당 기록 수를 줄입니다. ext4 블록 레이아웃은 블록 번호, 클러스터, 할당 그룹이 저장된 데이터의 물리적 설명을 어떻게 형성하는지 보여줍니다.

카피 온 라이트 파일시스템은 두 번째 고려사항을 추가합니다: 최대 기록 단위가 읽기, 압축, 체크섬, 또는 재작성 단위가 될 수 있습니다. 작은 파일의 경우 축소될 수 있지만, 큰 기록에 대한 제자리 변경은 여전히 애플리케이션이 요청한 것보다 더 많은 I/O를 발생시킬 수 있습니다. 그래서 블록 크기는 파일 용량만으로 선택하는 것이 아니라 접근 패턴에 맞춰야 합니다.

사진은 긴 연속 구간을 선호하지만 여전히 메타데이터를 포함합니다

JPEG, HEIC, RAW 이미지는 보통 완전한 파일로 작성되고 긴 연속 구간으로 읽힙니다. 큰 기록은 이러한 데이터에 대해 간접 메타데이터와 I/O 명령 오버헤드를 줄일 수 있습니다. 미디어 파일용 대형 기록에 관한 실용적 논의는 안정적인 순차적 콘텐츠가 자주 다시 쓰이는 파일보다 더 많은 이점을 얻는 이유를 설명합니다.

하지만 사진 라이브러리는 순차적이기만 한 것은 아닙니다. 폴더 탐색은 디렉터리 항목, 썸네일, 사이드카, 데이터베이스 인덱스를 읽습니다. 수천 개의 작은 동반 파일은 원본 이미지보다 할당 효율성과 메타데이터 지연을 더 눈에 띄게 만들 수 있습니다. 따라서 올바른 설계는 큰 원본과 애플리케이션의 작은 작업 데이터를 분리하여 하나의 블록 정책을 모두에 강제하지 않는 것입니다.

데이터베이스 페이지는 읽기-수정-쓰기 불일치를 드러냅니다

데이터베이스는 각 트랜잭션마다 전체 데이터베이스 파일을 다시 쓰는 대신 고정 크기 페이지와 인덱스를 업데이트합니다. 저장 기록이 데이터베이스 페이지보다 훨씬 크면 작은 논리적 업데이트도 더 넓은 영역을 읽고, 체크섬을 계산하고, 다시 써야 할 수 있습니다. 데이터베이스 페이지와 기록 크기 관계는 정렬이 지연 시간과 쓰기 증폭에 왜 중요한지 보여줍니다.

작은 기록이 자동으로 더 빠른 것은 아닙니다. 더 많은 메타데이터를 생성하고 압축 범위를 줄이며, 성장하는 파일을 더 많은 연속 구간으로 조각낼 수 있습니다. 목표는 저장 단위를 데이터베이스의 주요 I/O에 합리적으로 가깝게 유지하는 것이며, 모든 쿼리가 같은 페이지를 사용하거나 모든 데이터베이스 엔진이 같은 쓰기 경로를 가진다고 가정하지 않는 것입니다.

NAS 아카이브는 파일별 작업을 더 거친 I/O로 교환합니다

많은 작은 파일을 하나의 아카이브로 결합하면 전송 중 반복되는 네트워크 열기, 권한 확인, 디렉터리 업데이트를 제거할 수 있습니다. 저장 후 아카이브는 하나의 긴 연속 객체처럼 보이며, 더 큰 파일시스템 기록과 효율적으로 작동할 수 있습니다. 하지만 손상 집중과 개별 파일 업데이트의 불편함도 증가합니다.

아카이브 소프트웨어는 자체 기록 크기를 가집니다. tar 블로킹 팩터는 아카이브 기록을 그룹화하는 방식을 제어하지만 NAS 파일시스템을 재포맷하지는 않습니다. 이 계층을 분리해 두면 흔한 튜닝 실수를 방지할 수 있습니다: 애플리케이션 버퍼를 변경하고 디스크 할당 단위도 함께 변경된 것으로 가정하는 오류입니다.

최적 크기는 확장자가 아니라 활성 계층에 맞춰야 합니다

먼저 어떤 단위가 구성 가능하고 어떤 작업이 느린지 파악하세요. 용량 낭비는 할당 세분화 문제를, 높은 부분 읽기 비용은 기록 크기를, 커밋 지연은 데이터베이스 페이지, 로깅, 동기 쓰기를 가리킵니다. 아카이브 처리량은 순차 I/O와 네트워크 요청 크기에 더 의존할 수 있습니다.

RAM보다 크고 원본, 썸네일, 쿼리, 추출의 실제 혼합을 포함하는 데이터셋으로 벤치마크하세요. 일반적인 조각화 분석은 연속 구간 수와 지역성이 중요한 이유를 설명하지만, 내부 및 외부 조각화는 서로 다른 비용입니다. 대형 객체와 데이터베이스 저장 연구는 최적 경계가 객체 크기와 작업 부하에 따라 달라지며, 하나의 보편적 블록 값에 의존하지 않는다는 점을 추가로 보여줍니다.

자주 묻는 질문

사진에 항상 큰 블록 크기가 더 좋은가요?

아니요. 큰 사진 원본은 더 거친 순차 I/O에서 이점을 얻는 경우가 많지만, 카탈로그, 썸네일, 사이드카 파일은 여전히 작고 임의적입니다. 라이브러리의 페이로드와 작업 메타데이터를 별도의 작업 부하로 취급하세요.

파일시스템 블록 크기가 데이터베이스 페이지 크기와 같아야 하나요?

정확한 일치는 보편적인 규칙이 아닙니다. 정렬은 불필요한 I/O를 줄일 수 있지만, 캐싱, 저널링, 압축, 카피 온 라이트 동작, 데이터베이스 엔진의 접근 패턴도 결과에 영향을 미칩니다.

아카이브 블로킹 팩터를 변경하면 NAS 할당이 바뀌나요?

아니요. 아카이브 프로그램이 데이터를 입출력으로 그룹화하는 방식을 변경할 뿐입니다. 파일시스템 할당은 아카이브 아래의 파일시스템 또는 데이터셋 구성에 의해 제어됩니다.