Jak zoptymalizować zadania tworzenia miniatur zdjęć wokół okien kopii zapasowych

Eva Wong jest redaktorką techniczną i rezydentką majsterkowania w ZimaSpace. Jest geekiem od zawsze, z pasją do domowych laboratoriów i oprogramowania open source, a jej specjalnością jest przekładanie złożonych zagadnień technicznych na przystępne, praktyczne poradniki. Eva wierzy, że samodzielne hostowanie powinno sprawiać radość, a nie onieśmielać. Dzięki swoim samouczkom pomaga społeczności oswoić konfigurację sprzętu, od budowy pierwszego serwera NAS po opanowanie kontenerów Docker.

Generowanie miniatur odczytuje oryginały, zapisuje wiele niewielkich plików pochodnych, aktualizuje wiersze bazy danych i może konkurować o zasoby procesora z kodowaniem wideo lub uczeniem maszynowym. Uruchamianie go podczas tworzenia kopii zapasowej NAS może wydłużyć oba zadania i zwiększyć opóźnienia podczas przeglądania zdjęć.

Celem nie jest trwałe spowolnienie generowania miniatur. Zmierz, który zasób jest przeciążany podczas tworzenia kopii zapasowej, ogranicz tylko odpowiednią współbieżność i wyznacz każdemu intensywnemu zadaniu określone okno wraz z regułą postępowania w razie przekroczenia czasu. Zapisz standardowe ustawienia workerów, aby tymczasowe ograniczenie nie stało się niezauważalnym, stałym limitem.

Zmierz nakładanie się obciążeń przed zmianą ustawień workerów

Uruchom zwykłą kopię zapasową, gdy nie ma zaległości w generowaniu miniatur, i zanotuj czas trwania, opóźnienia pamięci masowej, przepustowość sieci oraz użycie procesora. Innego dnia przetwórz reprezentatywną partię miniatur bez ruchu związanego z kopiami zapasowymi i zarejestruj te same wskaźniki.

To, który zasób jest przeciążony, decyduje o rozwiązaniu. Wysokie opóźnienia dysku sugerują rozdzielenie w czasie obciążeń związanych z odczytem i zapisem; przeciążony procesor — zmniejszenie liczby workerów obrazów; obciążony wolumin bazy danych może wymagać oddzielenia pamięci masowej bazy danych od pamięci masowej plików pochodnych.

Immich udostępnia kolejki zadań i ustawienia workerów opisane w dokumentacji zadań i workerów. Przed edycją zanotuj bieżące wartości, aby w razie niepowodzenia móc łatwo przywrócić poprzednią konfigurację.

Zdefiniuj okno ciszy i regułę przekroczenia czasu

Umieszczaj kopie zapasowe w oknie o najwyższym priorytecie odzyskiwania, a następnie zarezerwuj kolejne lub poprzedzające okno na generowanie miniatur. Unikaj uruchamiania obu zadań w tej samej minucie, ponieważ start kolejki może spowodować nagły wzrost liczby otwieranych plików i aktywności bazy danych.

Określ, co zrobić, jeśli tworzenie kopii zapasowej się przedłuży. Bezpieczna zasada to pozostawienie ograniczonej lub wstrzymanej liczby procesów roboczych miniaturek do czasu zakończenia tworzenia kopii zapasowej, a następnie przywrócenie ich normalnej współbieżności zamiast bezmyślnego dopuszczania do nakładania się harmonogramów.

Zaplanuj okres na nadrobienie zaległości po dużych importach. Bez niego niski limit procesów roboczych w nocy może sprawić, że użytkownicy będą czekać na miniaturki całymi dniami, mimo dostępnych zasobów w ciągu dnia.

Dostosuj współbieżność do wąskiego gardła

Zmieniaj za każdym razem tylko jedną klasę procesów roboczych lub jedną wartość współbieżności i przetwarzaj partię tej samej wielkości. Porównuj tempo opróżniania kolejki z czasem tworzenia kopii zapasowej i opóźnieniem interaktywnym, zamiast oceniać powodzenie wyłącznie na podstawie użycia CPU.

Jeśli oryginały i kopie zapasowe znajdują się na tych samych dyskach HDD, mniejsza liczba równoczesnych odczytów obrazów często pomaga bardziej niż zwiększenie limitu CPU. Jeśli oryginały są na szybkim nośniku, ale baza danych jest przeciążona, przenieś obciążenie generowane przez bazę danych lub zadbaj o jego izolację, zanim zwiększysz liczbę procesów roboczych.

Zadbaj o niezawodność montowań sieciowych podczas obu operacji. Przewodnik po pamięci sieciowej Immich wyjaśnia, dlaczego zamontowana, ale zablokowana ścieżka może wyglądać na problem z zadaniem aplikacji.

Sprawdź pełny cykl i przywróć normalne działanie usługi

Obserwuj pełny cykl tworzenia kopii zapasowej, a następnie okres generowania miniaturek. Zapisz godziny rozpoczęcia i zakończenia, maksymalne opóźnienie pamięci masowej, długość kolejki, liczbę nieudanych zadań oraz to, czy użytkownicy mogą otwierać najnowsze zdjęcia podczas cyklu.

Po opróżnieniu kolejki przywróć udokumentowaną normalną wartość współbieżności, jeśli obniżono ją tylko po to, by bezpiecznie nadrobić zaległości. Stałe ograniczenie przepustowości powinno być celowe i oparte na zmierzonych celach dotyczących działania usługi.

Zmiana jest udana, jeśli czas trwania kopii zapasowej pozostaje przewidywalny, kolejki miniaturek opróżniają się w zaplanowanym czasie nadrabiania zaległości, a zadania nie kończą się błędem i nie brakuje żadnych plików. Cofnij ostatnią zmianę współbieżności, jeśli wzrośnie odsetek błędów lub opóźnienie bazy danych.

Wsparcie i porady

Więcej do przeczytania

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.