Co powoduje, że kontener zapełnia dysk systemowy, gdy jego dane znajdują się gdzie indziej?

Eva Wong jest redaktorką techniczną i rezydentką majsterkowania w ZimaSpace. Jest geekiem od zawsze, z pasją do domowych laboratoriów i oprogramowania open source, a jej specjalnością jest przekładanie złożonych zagadnień technicznych na przystępne, praktyczne poradniki. Eva wierzy, że samodzielne hostowanie powinno sprawiać radość, a nie onieśmielać. Dzięki swoim samouczkom pomaga społeczności oswoić konfigurację sprzętu, od budowy pierwszego serwera NAS po opanowanie kontenerów Docker.

Kontener może zapełnić dysk systemowy, jeśli logi, pamięci podręczne, pliki tymczasowe lub przypadkowe zapisy pozostaną w lokalnym magazynie Dockera.

Przeniesienie biblioteki multimediów lub woluminu bazy danych do innej puli nie przenosi obrazu kontenera, warstwy zapisywalnej, logu JSON, pamięci podręcznej BuildKit, metadanych ani żadnej ścieżki pominiętej na liście mapowań. Nieudane podłączenie zewnętrznego systemu plików może również pozostawić oczekiwany katalog na hoście pusty, przez co aplikacja zacznie zapisywać nowe dane na dysku systemowym bez widocznego błędu.

Zmierz katalog główny Dockera, zanim sprawdzisz dane aplikacji

Sprawdź system plików zawierający katalog główny danych Dockera i porównaj rozmiary katalogów na hoście ze statystykami obrazów, kontenerów, woluminów i pamięci podręcznej kompilacji w Dockerze. Zapisz wykorzystanie miejsca, zanim cokolwiek usuniesz.

Użytkownik Cloudron odkrył, że katalog /var/lib/docker/overlay2 zajmował więcej miejsca niż wszystkie widoczne dane aplikacji. To pokazuje, dlaczego katalog główny danych Dockera trzeba mierzyć niezależnie od zewnętrznych bibliotek.

Jeśli dysk systemowy jest pełny, ale na zewnętrznej puli jest wolne miejsce, ustal, czy dane zajmujące miejsce znajdują się w katalogach kontenerów, warstwach overlay, woluminach, obrazach czy pamięci podręcznej kompilacji. Nie wykonuj ogólnego czyszczenia, dopóki nie sklasyfikujesz aktywnych i możliwych do odzyskania danych.

Sprawdź nieograniczony rozmiar logów JSON kontenerów

Sprawdź sterownik logowania i rozmiar pliku logu każdego kontenera. Usługa może przechowywać główne dane w innym miejscu, podczas gdy wyjście standardowe i strumień błędów rosną bez końca w lokalnym katalogu kontenerów Dockera.

Code Maven opisuje przypadek, w którym polecenie docker system df nie ujawniło głównego problemu, ponieważ domyślny plik logu wciąż się powiększał, a jego rozmiar nie był uwzględniany w tym podsumowaniu. Ukrytym źródłem problemu był stale rosnący log kontenera.

Znajdź i napraw źródło nadmiernie generowanych błędów aplikacji, zanim obrócisz lub skrócisz logi. Skonfiguruj ograniczoną rotację logów dla przyszłych kontenerów i sprawdź, czy nowe pliki przestają rosnąć po osiągnięciu oczekiwanego limitu.

Znajdź dane zapisane w zapisywalnej warstwie kontenera

Porównaj zamierzone ścieżki trwałego przechowywania danych z rzeczywistymi katalogami aplikacji na pamięć podręczną, transkodowanie, pobieranie, bazę danych, miniatury, kopie zapasowe i pliki tymczasowe. Każdy niezmapowany zapis pozostaje w zapisywalnej warstwie kontenera na dysku systemowym.

Wyjaśnienie na forum Dockera wskazuje, że zapisane dane i zmienione pliki obrazu są przechowywane w warstwie zapisywalnej, a duże, nieobracane logi w metadanych kontenera. Jedno i drugie może sprawić, że pojedynczy kontener zajmie niemal całe lokalne miejsce, mimo korzystania z zewnętrznego woluminu danych.

Użyj raportu rozmiaru poszczególnych kontenerów i sprawdź największe zmienione ścieżki wewnątrz kontenera. Dodaj jawne montowania bind lub nazwane woluminy tylko dla danych, które muszą być zachowane, a następnie utwórz kontener ponownie, aby odrzucić nieaktualną zawartość warstwy zapisywalnej po utworzeniu kopii zapasowej wszystkich wartościowych danych.

Sprawdź, czy zewnętrzne urządzenie zostało zamontowane przed uruchomieniem kontenera

Sprawdź, czy dysk SSD, udział NAS lub pula pamięci masowej zostały zamontowane pod oczekiwaną ścieżką na hoście przed uruchomieniem kontenera Dockera. Porównaj tożsamość urządzenia i wynik polecenia wyświetlającego montowania z katalogiem widocznym dla kontenera.

Jeśli brakuje zewnętrznego punktu montowania, bazowy pusty katalog w systemie plików systemu może nadal istnieć. Kontener może normalnie zapisywać dane w tym katalogu awaryjnym, przez co zajętość dysku systemowego rośnie, a zewnętrzna pula pozostaje niewykorzystana.

Zatrzymaj kontener przed ponownym montowaniem pamięci masowej w miejscu zawierającym dane awaryjne. Bezpiecznie przenieś ukryte pliki lub uzgodnij ich zawartość, dodaj zależności montowania albo kontrole przy uruchamianiu i zablokuj uruchomienie aplikacji, jeśli oczekiwane urządzenie jest niedostępne.

Sprawdź warstwy obrazów, pamięć podręczną kompilacji i nieużywane obiekty

Sprawdź nieużywane obrazy, zatrzymane kontenery, anonimowe woluminy i pamięć podręczną BuildKit. Częste aktualizacje lub lokalne kompilacje mogą powodować gromadzenie wielu warstw, nawet gdy trwałe dane aplikacji są prawidłowo montowane w innym miejscu.

Wyjaśnienie na forum projektu Moby pokazuje, że montowania overlay mogą utrudniać interpretację danych o zajętości dysku i że wykorzystanie bazowego systemu plików trzeba analizować ostrożnie. Podobny przypadek z Home Assistant pokazał też, jak z czasem może narastać wykorzystanie overlay2 przez logi i warstwy.

Usuwaj tylko obiekty, które zostały potwierdzone jako nieużywane przez bieżące projekty Compose i kopie zapasowe. Nigdy nie usuwaj ręcznie poszczególnych katalogów overlay2, ponieważ może to doprowadzić do niespójności odwołań w metadanych Dockera.

Zweryfikuj poprawkę względem bazowego wzrostu

Po skorygowaniu odpowiedzialnej ścieżki regularnie zapisuj wykorzystanie miejsca przez katalog główny Dockera, rozmiary logów, rozmiary zapisywalne kontenerów i wykorzystanie puli zewnętrznej podczas obciążenia, które wcześniej powodowało wzrost.

Procedura ZimaSpace dotycząca przygotowania dużego transferu do NAS zapewnia powtarzalne obciążenie, które pozwala sprawdzić, czy dane trafiają do właściwej puli.

Problem zostanie rozwiązany tylko wtedy, gdy wzrost użycia dysku systemowego odpowiada oczekiwanemu zachowaniu obrazów i logów, trwałe dane aplikacji przyrastają na zewnętrznej puli, a brak zewnętrznego punktu montowania powoduje bezpieczne przerwanie uruchamiania zamiast cichego zapisu w systemie plików głównym.

Wsparcie i porady

Więcej do przeczytania

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.