Czy jedno gniazdo NVMe wystarczy na kontenery i metadane?

Eva Wong

IceWhale author

Eva Wong jest Technicznym pisarzem i stałym majsterkowiczem w ZimaSpace. Całe życie geek z pasją do homelabów i oprogramowania open-source, specjalizuje się w tłumaczeniu skomplikowanych koncepcji technicznych na przystępne, praktyczne przewodniki. Eva wierzy, że samodzielne hostowanie powinno być zabawą, a nie czymś onieśmielającym. Poprzez swoje samouczki umożliwia społeczności rozwiewanie tajemnic konfiguracji sprzętu, od budowy pierwszego NAS po opanowanie kontenerów Docker.

Is One NVMe Slot Enough for Containers and Metadata? - Zima Store Online

Tak, jedno gniazdo NVMe może wystarczyć na kontenery i metadane, jeśli szybka warstwa przechowuje możliwe do odtworzenia pliki aplikacji, kopie zapasowe trwałego stanu, bazy danych, miniatury i indeksy, a duże biblioteki multimediów oraz kopie zapasowe znajdują się gdzie indziej. Odpowiedź zmienia się, gdy awaria NVMe nie może zatrzymać ważnych usług, gdy jeden dysk nie zapewnia wymaganej pojemności lub wytrzymałości, albo gdy trzeba odizolować bazy danych od intensywnie zmienianej pamięci podręcznej i logów. Decydujące znaczenie ma tolerancja na odzyskiwanie danych, a nie sama liczba gniazd.

Najpierw oddziel pamięć stanu aplikacji od pojemności na duże dane

Pojedynczy szybki dysk sprawdza się najlepiej, gdy jego rola jest jasno określona. Obrazy kontenerów, bazy danych, konfiguracja aplikacji, miniatury, indeksy i często używane metadane korzystają z niskich opóźnień, natomiast biblioteki filmów, oryginalne zdjęcia, pobrane pliki i repozytoria kopii zapasowych zwykle powinny należeć do warstwy o większej pojemności.

Dane Dockera są rozproszone między kilkoma obiektami, a nie przechowywane w jednym uporządkowanym folderze. Aktualny przewodnik dotyczący użycia miejsca na dysku przez Dockera rozdziela obrazy, kontenery, wolumeny lokalne i pamięć podręczną kompilacji, co stanowi właściwy spis zasobów przed oceną, czy jedno urządzenie NVMe rzeczywiście jest zbyt małe.

Przewodnik ZimaSpace dotyczący rozdzielania danych rozruchowych i aplikacji dodaje przydatną granicę odpowiedzialności: odzyskiwanie danych jest łatwiejsze, gdy pliki systemu operacyjnego, stan aplikacji i duże zbiory danych użytkownika mają różne role.

Jeśli proponowany dysk NVMe zapełnia się, ponieważ dla wygody umieszczono na nim duże pliki, drugie gniazdo nie jest pierwszym rozwiązaniem. Przenieś dane wymagające dużej pojemności na dysk HDD lub do większej puli pamięci masowej, a następnie ponownie oblicz rozmiar szybkiej warstwy, uwzględniając tylko pliki, które rzeczywiście potrzebują niskich opóźnień.

Wolumeny trwałe są ważniejsze niż obrazy kontenerów

Obrazy kontenerów zwykle można pobrać ponownie. Z wolumenami trwałymi jest inaczej, ponieważ mogą zawierać bazy danych, konfigurację użytkownika, stan uwierzytelniania, ustawienia aplikacji i metadane potrzebne usłudze do wznowienia pracy w miejscu, w którym została przerwana.

Przewodnik po wolumenach Dockera wyjaśnia, że wolumeny przetrwają wymianę pojedynczego kontenera i przechowują stan poza ulotnym systemem plików kontenera. Dlatego właśnie to tę klasę danych należy chronić w pierwszej kolejności, gdy jedno gniazdo NVMe jest jedyną szybką warstwą dla aplikacji.

Zaklasyfikuj każdy wolumen jako możliwą do odtworzenia pamięć podręczną, możliwy do odzyskania stan aplikacji albo nieodwracalne dane użytkownika. Miniatury często można wygenerować ponownie, ale baza danych aplikacji do obsługi zdjęć, historia automatyzacji lub stan menedżera haseł mogą wymagać sprawdzonej kopii zapasowej, zanim zaakceptujesz konstrukcję z jednym dyskiem.

Jedno gniazdo NVMe wystarczy, gdy utrata urządzenia oznacza kontrolowane odtworzenie danych, a nie ich trwałą utratę. Jeśli nie potrafisz określić, jak zostanie przywrócony każdy ważny wolumen, projekt pamięci masowej jest niekompletny, nawet jeśli sam dysk SSD jest duży i szybki.

Logi i pamięć podręczna nie powinny decydować o liczbie gniazd NVMe

Dane często się zmieniające mogą sprawić, że jedno NVMe będzie wyglądało na zbyt małe na długo przed tym, zanim rzeczywisty stan aplikacji przekroczy jego pojemność. Logi kontenerów, pamięć podręczna transkodowania, pobrane aktualizacje, tymczasowe eksporty i pamięć podręczna kompilacji mogą szybko rosnąć, nie stając się danymi wartymi dublowania.

Przewodnik Better Stack dotyczący przechowywania logów kontenerów pokazuje, dlaczego rejestrowanie wymaga jasno określonych decyzji dotyczących miejsca i rotacji. Dodanie drugiego NVMe bez kontrolowania nieograniczonego wzrostu logów tylko zapewni temu samemu problemowi więcej przestrzeni.

Praktyczny przewodnik ZimaSpace dotyczący zapełniania pamięci hosta przez logi Dockera podpowiada, co sprawdzić: zidentyfikuj ścieżki wzrostu, zanim uznasz presję na pojemność za problem sprzętowy związany z liczbą gniazd.

Stosuj limity, rotację i oddzielne ścieżki dla nietrwałej pamięci podręcznej. Przeznacz budżet NVMe na bazy danych i metadane, które korzystają z niskich opóźnień. Drugie gniazdo staje się cenniejsze, gdy tworzy przemyślaną granicę awarii, a nie tylko pochłania niekontrolowane pliki tymczasowe.

Featured

ZimaCube 2 Osobisty domowy NAS w chmurze

ZimaCube2

Jedno gniazdo to równie mocno decyzja dotycząca przestoju, co pamięci masowej

Pojedynczy dysk NVMe tworzy pojedynczy punkt awarii dla wszystkiego, co jest na nim przechowywane. Nie oznacza to automatycznie, że projekt jest błędny. Oznacza to, że właściciel akceptuje możliwość zatrzymania aplikacji po awarii SSD do czasu zainstalowania zastępczego dysku i odtworzenia stanu.

Wyjaśnienie dotyczące oddzielnych pul pamięci NVMe opublikowane przez StorageReview jest przydatne, ponieważ rozróżnia szybki wolumen od pamięci podręcznej lub warstwowania. Gdy NVMe jest rzeczywistym wolumenem aplikacji, trzeba traktować je jak podstawową pamięć masową z własnym planem ochrony i odzyskiwania danych.

Duplikowanie danych na dwóch urządzeniach NVMe zwiększa dostępność, ponieważ awaria jednego urządzenia nie musi od razu wyłączyć puli. Kopia zapasowa na dysku HDD lub innym serwerze chroni natomiast możliwość odzyskania danych. To różne korzyści: lustro ogranicza przerwę w działaniu, a kopia zapasowa pomaga odzyskać wcześniejszy stan.

Jeśli rodzina może zaakceptować godzinę lub wieczór przestoju aplikacji, jedno NVMe wraz ze sprawdzonymi kopiami zapasowymi może być rozsądnym rozwiązaniem. Jeśli to samo urządzenie obsługuje automatykę domową, uwierzytelnianie, bazy danych lub usługi, które muszą pozostać dostępne, łatwiej uzasadnić dwa szybkie urządzenia albo inne rozwiązanie zapewniające dostępność.

Wykorzystaj pojedyncze gniazdo rozszerzeń na ograniczenie, które ma największe znaczenie

Kompaktowe serwery wymagają kompromisów, ponieważ jedna ścieżka PCIe lub M.2 może czasami służyć do podłączenia szybszej pamięci masowej, sieci, akceleratora AI lub innego urządzenia rozszerzającego. Najlepszym wyborem jest ten, który usuwa rzeczywiste wąskie gardło w planowanym obciążeniu.

Niezależna recenzja ZimaBoard 2 zwraca uwagę, że pojedyncze gniazdo PCIe jest elastyczne, ale trzeba wybierać jego zastosowanie. To właściwe podejście do zakupu kompaktowego serwera domowego: ścieżki rozszerzeń są budżetem, a nie listą kontrolną.

ZimaBoard 2 ma jedno gniazdo rozszerzeń PCIe 3.0 oraz dwa złącza SATA, więc adapter NVMe ma najwięcej sensu wtedy, gdy niskie opóźnienia stanu aplikacji są ważniejsze niż dodanie kolejnej karty sieciowej, akceleratora lub GPU. Nie zajmuj tego gniazda na NVMe tylko dlatego, że wyniki testów SSD wyglądają atrakcyjnie.

Jeśli ten sam serwer potrzebuje dublowanego NVMe, wielu warstw SSD, szybszej sieci i akceleratora, kompaktowa platforma przekazuje ważną informację: obciążenie przekroczyło możliwości modelu z jednym gniazdem rozszerzeń. W takim przypadku lepszym zakupem będzie system z większą liczbą natywnych ścieżek pamięci masowej niż dokładanie adapterów do jednego złącza.

Wybierz jedno NVMe, gdy czas odtwarzania danych jest akceptowalny; wybierz więcej ścieżek, gdy nie jest

W przypadku niewielkiego zestawu aplikacji domowych jedno odpowiednio dobrane NVMe może być dobrym rozwiązaniem, jeśli stan kontenerów jest objęty kopiami zapasowymi, bazy danych uwzględniono w planie odzyskiwania, a duże dane użytkownika znajdują się na redundantnej lub niezależnie zabezpieczonej pamięci masowej. Pozwala to zachować prostą szybką warstwę i uniknąć płacenia za dublowaną pojemność, której gospodarstwo domowe może nie potrzebować.

Wybierz drugą ścieżkę NVMe, gdy ważna jest natychmiastowa ciągłość działania usług, gdy obciążenie zapisem bazy danych i intensywnie używana pamięć podręczna powinny być rozdzielone albo gdy wymagana pula aplikacji jest już na tyle duża, że jedno urządzenie powoduje niepraktyczny kompromis dotyczący pojemności lub wytrzymałości.

Jeśli zakup wynika z rozwoju aplikacji, a nie z potrzeby redundancji, ponownie sprawdź obliczenia pojemności przed zmianą platformy. Powiązany przewodnik ZimaSpace dotyczący pojemności NVMe dla puli aplikacji rozdziela obrazy, wolumeny, bazy danych, logi, migawki i rezerwę wolnego miejsca, dzięki czemu decyzja dotycząca gniazda opiera się na rzeczywistych danych.

Jedno gniazdo NVMe wystarczy zatem wtedy, gdy zapewnia wymagane opóźnienia, a jego awaria powoduje przestój możliwy do odtworzenia. Nie wystarczy, gdy wymaganiami są wysoka dostępność, oddzielne domeny awarii lub kilka ról szybkiej pamięci masowej.