Jak głębokość kolejki I/O wpływa na przepustowość i opóźnienia domowego NAS?

Eva Wong

IceWhale author

Eva Wong jest Technicznym pisarzem i stałym majsterkowiczem w ZimaSpace. Całe życie geek z pasją do homelabów i oprogramowania open-source, specjalizuje się w tłumaczeniu skomplikowanych koncepcji technicznych na przystępne, praktyczne przewodniki. Eva wierzy, że samodzielne hostowanie powinno być zabawą, a nie czymś onieśmielającym. Poprzez swoje samouczki umożliwia społeczności rozwiewanie tajemnic konfiguracji sprzętu, od budowy pierwszego NAS po opanowanie kontenerów Docker.

How Does I/O Queue Depth Change Home NAS Throughput and Latency? - Zima Store Online

Głębokość kolejki I/O może zwiększyć przepustowość domowego NAS, gdy kilku klientów jednocześnie korzysta z pamięci masowej, ale tylko wtedy, gdy stos pamięci masowej potrafi przetwarzać te oczekujące żądania równolegle. Gdy zapotrzebowanie przekracza tę użyteczną równoległość, dodatkowe żądania czekają dłużej, nawet jeśli NAS nadal przesyła więcej danych na sekundę.

Dlatego test transferu na wielu urządzeniach może wykazać wyższą łączną szybkość, podczas gdy przeglądarka zdjęć, baza danych czy eksplorator plików wydają się mniej responsywne. Głębokość kolejki nie jest sama w sobie ustawieniem prędkości; jest miarą niedokończonej pracy, której efekt zależy od obciążenia, typu dysku, macierzy, pamięci podręcznej i ścieżki protokołu.

Co właściwie mierzy głębokość kolejki I/O?

Głębokość kolejki opisuje, ile operacji I/O jest oczekujących na danym poziomie. W narzędziu testowym może to oznaczać żądania przesłane, ale jeszcze nie zakończone przez jedno zadanie. Definicja głębokości I/O w fio określa to jako liczbę jednostek I/O utrzymywanych w locie względem pliku. Zakończone operacje nie należą już do tej głębokości.

Domowy NAS ma więcej niż jedną kolejkę. Aplikacja może czekać na żądanie udostępniania plików, NAS może etapować żądania blokowe w oprogramowaniu, a kontroler urządzenia może utrzymywać własne kolejki poleceń. Wyświetlana głębokość jednej warstwy nie ujawnia więc wszystkich żądań oczekujących gdzie indziej na ścieżce.

Współbieżność naturalnie tworzy głębokość. Czterech klientów wysyłających po jednym blokującym żądaniu może wygenerować kilka oczekujących operacji bez celowego wyboru głębokiej kolejki przez klienta. Indeksowanie w tle, migawki, pobieranie i usługi multimedialne mogą dodać więcej pracy, więc kolejka skierowana do urządzenia może być głębsza niż sugeruje to aplikacja działająca na pierwszym planie.

Dlaczego większa liczba oczekujących operacji I/O może zwiększyć przepustowość?

Urządzenie nie może wykorzystać wewnętrznej równoległości, gdy otrzymuje tylko jedno żądanie i musi czekać na kolejne po każdym zakończeniu. Utrzymywanie kilku niezależnych żądań pozwala planistom i kontrolerowi wybierać zadania dla różnych kanałów, kości, dysków lub członków macierzy, podczas gdy inne operacje nadal trwają.

Warstwa blokowa wielowątkowego kolejkowania I/O w Linuksie została zaprojektowana do jednoczesnego kolejkowania i przesyłania żądań, aby nowoczesne pamięci masowe mogły wykorzystać swoją równoległość. Oddziela również kolejki etapowania programowego od kolejek dyspozycyjnych sprzętu, co wyjaśnia, dlaczego zlecone zadania mogą być reorganizowane lub opóźniane przed dotarciem do dysku.

Ten efekt zależy od obciążenia. Niezależne odczyty z kilku lokalizacji SSD mogą się skutecznie nakładać, podczas gdy pojedyncza operacja synchroniczna nie stworzy takiej możliwości. Na macierzy RAID równoległe żądania mogą również docierać do różnych członków, ale prace parzystości, blokady lub nasycona sieć mogą stać się kolejnym ograniczeniem, zanim dyski osiągną swoją użyteczną głębokość.

Kiedy równoległość zamienia się w oczekiwanie?

Głębokość kolejki pomaga, dopóki aktywne zasoby są zajęte. Po tym punkcie nowe żądanie nie odblokowuje więcej pracy równoległej; dołącza do zaległości. Przepustowość może się wyrównać blisko swojego maksimum, podczas gdy czas realizacji rośnie, ponieważ każde żądanie spędza więcej czasu na oczekiwaniu przed obsługą.

Stan kolejki	Zachowanie magazynu	Całkowita przepustowość	Opóźnienie żądania	Praktyczne znaczenie
Niedopełnione	Niektóre zasoby urządzenia mogą być bezczynne	Poniżej możliwego szczytu	Zazwyczaj niskie	Większa współbieżność może pomóc
Produktywna głębokość	Niezależna praca działa równolegle	Rosnące efektywnie	Umiarkowane	Najlepsza równowaga zależy od obciążenia
Nasycone	Zasoby podstawowe pozostają zajęte	Blisko plateau	Rosnące	Nowa praca głównie czeka
Przeciążone	Zaległości konkurują między klientami	Płaskie lub niestabilne	Wysokie i zmienne	Zadania interaktywne wydają się wolne

Tabela jest modelem stanu, a nie uniwersalnym wykresem głębokości kolejki. Punkty przejścia zmieniają się wraz z rozmiarem bloku, proporcją odczytów/zapisów, buforowaniem, oprogramowaniem dysku, układem RAID oraz tym, czy żądania mogą faktycznie działać niezależnie.

Ważnym sygnałem jest kształt odpowiedzi: użyteczna głębokość przynosi znaczący wzrost przepustowości przy ograniczonym koszcie opóźnienia, podczas gdy przeciążenie powoduje znaczne oczekiwanie przy niewielkim wzroście wykonanej pracy. Stała rekomendacja głębokości kolejki bez kontekstu obciążenia nie jest w stanie zidentyfikować tej granicy.

Jak równoczesny dostęp buduje zaległości w NAS?

Równoczesni użytkownicy rzadko generują identyczne zadania magazynowe. Jeden komputer może przesyłać strumieniowo duży plik, inny przeglądać tysiące zdjęć, a zadanie kopii zapasowej może zapisywać nowe bloki i metadane. NAS przeplata te żądania, więc sekwencyjne obciążenie może stać się fragmentaryczne na urządzeniu, nawet gdy każdy klient zachowuje się przewidywalnie.

Protokoły udostępniania plików, systemy plików i aplikacje również narzucają kolejność. Żądanie może zależeć od wyszukiwania metadanych, sprawdzenia uprawnień, blokady lub trwałego zapisu, zanim kolejny krok będzie mógł zostać wykonany. Zwiększenie głębokości urządzenia blokowego nie może usunąć zależności istniejącej powyżej urządzenia, ale niezwiązani klienci mogą nadal wypełniać kolejkę wokół tej zablokowanej sekwencji.

Ta interakcja wyjaśnia, dlaczego łączna prędkość i doświadczenie użytkownika mogą się różnić. Transfer masowy może utrzymać urządzenie produktywne, podczas gdy małe interaktywne żądanie czeka za większymi lub licznymi operacjami. Polityki sprawiedliwości mogą zmniejszyć głodzenie, ale nie mogą sprawić, że już nasycony zasób natychmiast wykona nieograniczoną pracę. Mieszane obciążenia powinny być więc oceniane pod kątem jakości obsługi każdej klasy, a nie tylko łącznej szybkości przesyłu danych.

Dlaczego HDD, SATA SSD i NVMe reagują inaczej?

Dyski obrotowe ponoszą koszt mechaniczny, gdy żądania dotyczą odległych lokalizacji. Głębsza kolejka losowa daje schedulerowi więcej wyborów, ale może też oznaczać więcej wyszukiwań i dłuższe oczekiwania. Żądania sąsiednie łatwiej jest łączyć, więc lokalność sekwencyjna pozostaje cenna nawet gdy dysk jest zajęty.

Dyski SSD eliminują mechaniczne wyszukiwanie i mogą obsługiwać równoległe operacje flash, ale ich kontrolery, kanały NAND, oprogramowanie układowe i prace konserwacyjne w tle nadal nakładają ograniczenia. NVMe udostępnia wiele kolejek poleceń i dużą pojemność poleceń; specyfikacja kolejek NVMe opisuje zalegające polecenia i limity kontrolera, a nie obiecuje, że każde dodane polecenie poprawi wydajność.

Sam typ dysku nie jest wyrokiem. Dysk SATA SSD może już przewyższać potrzeby małego interaktywnego obciążenia, podczas gdy macierz HDD może zapewniać silną przepustowość sekwencyjną. Praktyczna decyzja HDD kontra SSD powinna odpowiadać zapotrzebowaniu na losowe I/O, pojemności, wytrzymałości i opóźnieniom, a nie tylko prędkości interfejsu.

Co powinien mierzyć domowy NAS przy współbieżności?

Mierz przepustowość i opóźnienie razem. Dla opóźnienia raportuj rozkład, taki jak mediana, 95. i 99. percentyl, zamiast tylko średniej. Średnie mogą pozostać akceptowalne, podczas gdy niewielka, ale istotna część żądań staje się na tyle wolna, że przerywa przeglądanie, działanie VM lub pracę bazy danych. Śledź wyniki także w czasie, ponieważ krótkie skoki mogą zniknąć w długim interwale raportowania.

Obserwuj także żądania w trakcie realizacji, czas poświęcony na obsługę odczytów i zapisów oraz ważony czas I/O. Dokumentacja statystyk blokowego I/O w Linuksie identyfikuje liczniki dla aktywnych żądań, czasu obsługi, łączeń oraz ważoną miarę odzwierciedlającą zarówno czas realizacji, jak i narastające zaległości.

Uruchom test bazowy z jednym klientem, a następnie powtórz z rzeczywistą liczbą jednoczesnych klientów oraz tymi samymi rozmiarami plików, proporcją odczyt/zapis i stanem pamięci podręcznej, jakich spodziewasz się w domu. Jeśli sieć jest już pełna, strojenie pamięci masowej może nie zmienić wyniku; lista kontrolna wąskich gardeł NAS 10GbE może uzupełnić diagnozę, ale nie stanowi dowodu na mechanizm kolejkowania.

FAQ

Czy większa głębokość kolejki zawsze przyspiesza domowy NAS?

Nie. Pomaga tylko wtedy, gdy ścieżka pamięci masowej ma niewykorzystaną równoległą pojemność, a obciążenie zawiera niezależne operacje. Po osiągnięciu plateau przepustowości większa głębokość zwykle dodaje oczekiwanie i może pogorszyć opóźnienia w ogonie.

Jaką głębokość kolejki powinien stosować benchmark domowego NAS?

Używaj kilku głębokości, zaczynając od jednej i zwiększając, aż przepustowość przestanie się istotnie poprawiać lub opóźnienia staną się nieakceptowalne. Przydatny zakres zależy od urządzenia, macierzy, obciążenia i liczby klientów, więc jedna stała wartość nie może reprezentować każdego NAS.

Dlaczego jeden użytkownik może odczuwać opóźnienia, gdy całkowita przepustowość NAS wygląda dobrze?

Przepustowość agregatowa liczy wszystkie zakończone dane, a nie czas oczekiwania każdego żądania. Transfer masowy może dominować w zakończeniach, podczas gdy interaktywne żądanie czeka w kolejce, co sprawia, że interfejs wydaje się wolny mimo wysokiej łącznej przepustowości.

Czy SMB lub NFS mogą zmienić obserwowaną głębokość kolejki?

Tak. Współbieżność protokołu, buforowanie, semantyka synchroniczna i zachowanie klienta wpływają na to, ile operacji trafia do NAS i kiedy stają się one gotowe do zapisu. Porównanie SMB i NFS może pomóc w wyborze protokołu, ale głębokość kolejki urządzenia pozostaje tylko jednym z poziomów.

Czy szybsza sieć może uwidocznić opóźnienia kolejkowania?

Tak. Gdy sieć może przesyłać zadania szybciej niż je realizuje pamięć masowa, zaległości przesuwają się w stronę warstwy pamięci masowej. Ulepszenie może podnieść szczytową przepustowość, jednocześnie ujawniając ograniczenia dysku, macierzy lub systemu plików, które wcześniej maskował wolniejszy łącznik.

Ostateczne wnioski

Głębokość kolejki I/O poprawia działanie domowego NAS tylko wtedy, gdy oczekujące żądania odblokowują użyteczną pracę równoległą. Oceniaj wynik na podstawie jednoczesnej przepustowości i percentyli opóźnień; gdy przepustowość się stabilizuje, a opóźnienie żądań rośnie, kolejka zmieniła się z źródła równoległości w zaległości.