Dlaczego fragmentacja wolnej przestrzeni spowalnia domowy NAS, zanim zostanie zapełniony?

Domowy NAS może zwalniać zanim zostanie całkowicie zapełniony, ponieważ pozostała wolna przestrzeń może być duża łącznie, ale trudna do przydzielenia w użytecznych, ciągłych fragmentach.

Usunięcia pozostawiają dziury o różnych rozmiarach w całym zbiorze. Nowe pliki, aktualizacje copy-on-write, paski parzystości i migawki nie zawsze mogą efektywnie ponownie wykorzystać te dziury. Alokator spędza więcej czasu na poszukiwaniu, duże zapisy dzielone są na więcej fragmentów, a wskaźnik pojemności nadal wygląda komfortowo, ponieważ liczy wolne bajty, a nie ich układ.

Zbiór kończy się na użytecznych fragmentach zanim zabraknie wolnych bajtów

Fragmentacja wolnej przestrzeni opisuje, jak dostępna pojemność jest rozłożona. Dziesięć gigabajtów w jednym obszarze nie jest równe dziesięciu gigabajtom podzielonym na tysiące wąskich szczelin, gdy obciążenie wymaga długich, sekwencyjnych fragmentów. Alokator może spełnić oba żądania, ale wersja z fragmentacją tworzy więcej mapowań i mniej przewidywalną lokalizację fizyczną.

Dlatego procent użycia i fragmentacja to oddzielne sygnały. właściwości pojemności i fragmentacji zbioru raportują różne aspekty tego samego stanu magazynu; żadna z tych wartości osobno nie przewiduje opóźnień aplikacji.

Usunięcia tworzą dziury, których nowe zapisy nie zawsze mogą ponownie wykorzystać

Usunięty plik zwraca swoje fragmenty tylko wtedy, gdy żadna migawka, klon lub otwarte odniesienie ich już nie posiada. Nawet wtedy nowy zapis może wymagać innego wyrównania lub dłuższego fragmentu. Małe zwolnione obszary mogą być odpowiednie dla metadanych, ale nadal słabo pasują do dużego archiwum lub fragmentu bazy danych.

W miarę zawężania się zestawu wyborów, alokator może przejść od szybkiego wyboru do bardziej kosztownego przeszukiwania. OpenZFS opisuje, jak niskie warunki wolnej przestrzeni zmieniają zachowanie alokacji w swoim poradniku dotyczącym wolnej przestrzeni i alokacji. Dokładny próg jest specyficzny dla implementacji, więc stały procent należy traktować jako margines operacyjny, a nie uniwersalną granicę awarii.

Copy-on-Write powoduje, że mapa wolnej przestrzeni starzeje się inaczej

Copy-on-write nie nadpisuje istniejącego bloku. Przydziela nową lokalizację, zapisuje zmienioną zawartość, aktualizuje metadane i zwalnia starą lokalizację tylko wtedy, gdy nikt inny się do niej nie odwołuje. To zachowuje migawki i spójność po awarii, ale powtarzające się modyfikacje mogą rozpraszać nowe wersje po całym zbiorze.

Jasne wyjaśnienie copy-on-write łączy niezmienne stare bloki z nową alokacją, podczas gdy notatka projektowa systemu plików o długoterminowej fragmentacji copy-on-write pokazuje, dlaczego układ może stać się mniej sekwencyjny wraz z narastaniem aktualizacji. Migawki mogą wydłużyć ten okres, utrzymując stare fragmenty niedostępne do ponownego użycia.

HDD i SSD ujawniają różne aspekty problemu

Na HDD fragmentowane fragmenty bezpośrednio zwiększają mechaniczne szukanie, więc duży plik może być odczytywany znacznie wolniej niż jego pierwotna prędkość sekwencyjna. SSD eliminują ruch głowicy, ale nie wyszukiwania alokatora, zmiany mapowania, ruch metadanych ani wewnętrzne czyszczenie flash. Fragmentacja może więc pozostać problemem opóźnień nawet przy szybkim losowym odczycie urządzenia.

Parzystość i kompresja dodają kolejne ograniczenia, ponieważ magazyn może alokować wokół granic pasków lub zmiennych skompresowanych rekordów. Badania nad fragmentacją w magazynowaniu dużych obiektów pokazują, że rozmiar obiektu i wzór aktualizacji mają wspólne znaczenie. Benchmark oparty tylko na pustym zbiorze nie może reprezentować tego stanu alokacji po czasie.

Zapas pojemności to zasób alokacji

Wolna przestrzeń daje alokatorowi wybory. Więcej wyborów ułatwia umieszczenie rosnącego pliku w dłuższych fragmentach, rozłożenie aktualizacji copy-on-write i absorpcję konserwacji bez natychmiastowego ponownego użycia wąskich dziur. To jest inżynierski powód pozostawiania zapasu; to nie tylko ostrzeżenie o ostatnim bajcie.

Nie traktuj powszechnej rekomendacji 80 procent jako prawa. Analiza zapasów i zachowania alokatora w zbiorze jest przydatnym kontekstem, ale domowy NAS powinien być oceniany na podstawie rzeczywistej metryki fragmentacji, retencji migawek, obciążenia, układu urządzenia i trendu opóźnień. Wzrost czasu alokacji przed pełną pojemnością to obserwowalne ostrzeżenie.

FAQ

Czy usunięcie jednego dużego pliku defragmentuje pulę NAS?

Może stworzyć użyteczny duży wolny fragment, jeśli żadna migawka nie zatrzymuje bloków, ale nie reorganizuje istniejących plików ani nie gwarantuje, że przyszła alokacja pozostanie ciągła.

Czy fragmentacja wolnej przestrzeni to to samo co fragmentacja plików?

Nie. Fragmentacja plików opisuje jeden plik podzielony na fragmenty. Fragmentacja wolnej przestrzeni opisuje kształt nieprzydzielonych obszarów. Obie na siebie wpływają, ale mogą się zmieniać niezależnie.

Czy SSD wyeliminuje spowolnienie?

Eliminuje koszt mechanicznego szukania, ale nie alokację systemu plików, metadane, copy-on-write, parzystość ani narzut czyszczenia flash. Objaw może się zmniejszyć lub przesunąć w stronę opóźnień ogona, zamiast zniknąć.