Kontener bazy danych może nadal zajmować coraz więcej miejsca po wyczyszczeniu danych, ponieważ usuwanie wierszy, dzienniki transakcji, indeksy i dzienniki kontenera podlegają różnym zasadom odzyskiwania miejsca.
Nie zakładaj, że wolumin bazy danych rośnie tylko dlatego, że całkowity rozmiar kontenera na dysku się zwiększa. Zmierz osobno katalog danych bazy, katalogi WAL lub binlogów, plik dziennika Dockera, zapisywalną warstwę oraz ścieżki kopii zapasowych lub plików tymczasowych. Następnie ustal, czy usunięte miejsce w bazie można ponownie wykorzystać wewnętrznie, ale nie jest zwalniane na hoście, czy rzeczywiście trzeba przepisać plik, czy też nadal rośnie zupełnie inny plik.
Zmierz, która ścieżka nadal rośnie
Przed i po jednym cyklu czyszczenia zapisz rozmiar nazwanego woluminu lub katalogu bazy danych zamontowanego jako bind mount, zapisywalnej warstwy kontenera, dziennika kontenera na hoście, katalogu dzienników transakcji bazy danych oraz katalogu zrzutów lub plików tymczasowych.
Przewodnik po diagnozowaniu problemów z miejscem na dysku PostgreSQL zaczyna się od tej samej zasady: najpierw ustal, gdzie znajduje się zajęte miejsce, zanim wybierzesz metodę jego odzyskania.
Jeśli rośnie tylko dziennik Dockera, czyszczenie bazy danych nie ma znaczenia. Jeśli plik danych pozostaje duży, ale przestaje rosnąć po czyszczeniu, silnik może już ponownie wykorzystywać zwolnione strony, mimo że system plików hosta nie odnotowuje zmniejszenia.
Odróżnij miejsce możliwe do ponownego wykorzystania w bazie danych od miejsca zwolnionego na dysku
Wiele transakcyjnych baz danych nie usuwa od razu bloków pliku ze środka tabeli po skasowaniu wierszy. Oznaczają lub odzyskują wewnętrzne strony, aby późniejsze zapisy mogły ponownie wykorzystać to miejsce, podczas gdy podstawowy plik zachowuje ten sam rozmiar.
PostgreSQL dobrze to ilustruje: zwykłe VACUUM umożliwia wewnętrzne ponowne wykorzystanie miejsca, ale zazwyczaj nie zwalnia tych środkowych obszarów pliku do systemu operacyjnego.
Sprawdź, czy plik nadal rośnie podczas nowych zapisów po czyszczeniu. Stabilny rozmiar pliku przy malejącym wewnętrznym stopniu zaśmiecenia to coś innego niż niekontrolowany wzrost i zwykle nie uzasadnia awaryjnego przepisywania.
Użyj metody odzyskiwania miejsca właściwej dla silnika bazy danych, a nie ogólnego czyszczenia Dockera
Jeśli chcesz odzyskać miejsce na hoście, najpierw ustal, z jakiego silnika i formatu pamięci masowej korzystasz. PostgreSQL, MySQL lub MariaDB oraz SQLite nie mają jednej uniwersalnej komendy zmniejszającej rozmiar, a niektóre operacje odzyskiwania miejsca przepisują duże pliki lub blokują tabele.
Artykuł o pamięci masowej MySQL wyjaśnia, jak OPTIMIZE może przebudować tabele InnoDB, zamiast zakładać, że wykonanie polecenia DELETE oznacza natychmiastowe odzyskanie miejsca na hoście.
Wykonaj kopię zapasową bazy danych i sprawdź, czy masz wolne miejsce robocze przed operacją wymagającą intensywnego przepisywania danych. Prawie pełny system plików serwera domowego to najgorszy moment na uruchomienie polecenia, które wymaga drugiej kopii dużej tabeli.
Sprawdź osobno retencję WAL, binlogów i danych replikacji
Logi transakcji mogą rosnąć nawet po usunięciu starych rekordów aplikacji. Nieudane zadanie archiwizacji, nieaktualny slot replikacji, opóźniona replika, długa transakcja lub wymóg przechowywania kopii zapasowej mogą powodować, że historyczne segmenty logów pozostają na dysku.
Niedawny poradnik dotyczący odzyskiwania działania PostgreSQL pokazuje, jak zachowywanie WAL może zajmować miejsce niezależnie od danych tabel, które użytkownik właśnie wyczyścił.
Nie usuwaj ręcznie plików WAL ani binlogów z systemu plików. Usuń przyczynę problemu z retencją za pomocą mechanizmów silnika bazy danych, a następnie sprawdź, czy pliki są ponownie prawidłowo zwalniane.
Ogranicz rozmiar logów Dockera i sprawdź zapisywalną warstwę
Kontener bazy danych może sprawiać wrażenie, że zajmuje coraz więcej miejsca, ponieważ dane ze standardowego wyjścia lub standardowego wyjścia błędów są zapisywane w nieograniczonym logu Dockera albo tymczasowy eksport, pamięć podręczna lub plik bazy danych trafił do warstwy kontenera zamiast do przeznaczonego na to trwałego woluminu.
Przypadek z Dockerem na własnym serwerze pokazuje, że logi kontenera mogą rosnąć bez końca, jeśli nie skonfigurowano rotacji.
Przed usunięciem czegokolwiek przypisz każdy duży plik na hoście do ścieżki w kontenerze. Skonfiguruj rotację logów, aby zapobiec ich dalszemu wzrostowi, i przenieś dane bazy do jawnie określonego wolumenu, zamiast polegać na ulotnej warstwie zapisywalnej.
Sprawdź, czy czyszczenie zapewnia trwały zapas wolnego miejsca
Po wykonaniu wybranego kroku odzyskiwania miejsca uruchom typowe obciążenie związane z zapisem przez reprezentatywny okres i porównaj ilość wolnego miejsca na hoście, rozmiar plików bazy danych, rozmiar dziennika transakcji, logi Dockera oraz wewnętrzne wskaźniki wolnego miejsca lub fragmentacji.
Przewodnik dotyczący zmniejszania rozmiaru danych w PostgreSQL podkreśla, że zmniejszenie rozmiaru wymaga ukierunkowanej konserwacji, zamiast zakładać, że każde usunięcie powinno od razu zmniejszać rozmiar pliku widoczny w systemie operacyjnym.
Naprawę można uznać za zakończoną, gdy przewidywany wzrost bazy danych mieści się w odzyskanym miejscu lub jest ograniczony, a po każdym cyklu czyszczenia host nie traci już niewyjaśnionej ilości wolnego miejsca. Powiązany przewodnik ZimaSpace dotyczący spójnych kopii zapasowych kontenerów baz danych określa granice przywracania przed każdą operacją przepisującą pliki bazy danych.
Często zadawane pytania
Dlaczego usunięcie milionów wierszy czasami zwalnia tak niewiele miejsca na dysku hosta?
Silnik bazy danych może oznaczyć te strony jako możliwe do ponownego wykorzystania w obrębie pliku bazy danych, zamiast skracać sam plik. Może to zapobiec dalszemu zwiększaniu jego rozmiaru, nie zmieniając widocznego na hoście rozmiaru pliku.
Czy za każdym razem, gdy kontener zajmuje dużo miejsca, należy wykonywać pełne przepisywanie danych?
Nie. Operacje wymagające intensywnego przepisywania danych mogą wymagać blokad, dodatkowego miejsca i znacznych operacji wejścia/wyjścia. Wykonuj je tylko wtedy, gdy konieczne jest odzyskanie miejsca na hoście i znasz ryzyko związane z danym silnikiem bazy danych.
Czy polecenie Docker prune może odzyskać miejsce zajmowane przez wolumen bazy danych?
Nie jest to bezpieczne, gdy wolumen nadal zawiera trwałe dane bazy. Przed usunięciem ustal, czy zajęte miejsce przypada na logi, obrazy, zatrzymane kontenery czy aktywne dane bazy.
Wsparcie i porady
Więcej do przeczytania

Jak ukryć filmy dla dorosłych na serwerze NAS przed członkami rodziny
Przechowuj filmy dla dorosłych prywatnie na rodzinnym serwerze NAS. Sprawdź uprawnienia folderów, dostęp do bibliotek Plex i Jellyfin, miniatury, historię oglądania, wspólne loginy do...

Co sprawdzić przed załadowaniem modelu społecznościowego w Transformers
Użyj aktualizacji piaskownicy Jinja dla Transformers, aby sprawdzić pochodzenie modelu, szablony czatu, zdalny kod, serializowane wagi i pierwsze uruchomienia w izolowanym środowisku.

Uruchom Mirage lokalnie: OCR i wykrywanie obiektów na podstawie jednego obrazu
Przetestuj niewielki lokalny model wizyjny Cactus Compute, zweryfikuj OCR i ekstrakcję obiektów na rzeczywistych danych wejściowych oraz poznaj ograniczenia związane z pamięcią, językiem i...



