Vad får en container att fylla systemdisken när dess data finns någon annanstans?

Eva Wong är teknisk skribent och händig hemmabyggare på ZimaSpace. Som tekniknörd sedan barnsben med ett brinnande intresse för hemlabb och programvara med öppen källkodspecialiserar hon sig på att göra komplexa tekniska koncept begripliga genom praktiska, praktiska guider. Eva tycker att självhosting ska vara roligt, inte avskräckande. Genom sina handledningar hjälper hon communityn att göra hårdvaruinstallationer mindre mystiska, från att bygga sin första NAS till att bemästra Docker-containrar.

En container kan fylla systemdisken när loggar, cache, temporära filer eller oavsiktliga skrivningar blir kvar i Dockers lokala lagring.

Att flytta ett mediebibliotek eller en databasvolym till en annan pool flyttar inte containeravbildningen, det skrivbara lagret, JSON-loggen, BuildKit-cachen, metadata eller någon sökväg som utelämnats från monteringslistan. Om en extern montering misslyckas kan den förväntade katalogen på värden också bli tom, vilket gör att programmet skriver nya data till systemdisken utan något uppenbart fel.

Mät Dockers rotkatalog innan du granskar applikationsdata

Kontrollera filsystemet där Dockers datarot finns och jämför värdstorlekarnas katalogstorlekar med Dockers redovisning av avbildningar, containrar, volymer och byggcache. Anteckna användningen innan du tar bort något.

En Cloudron-användare upptäckte att /var/lib/docker/overlay2 använde mer utrymme än alla synliga applikationsdata, vilket visar varför Dockers lagringsrot måste mätas separat från externa bibliotek.

Om systemdisken är full men den externa lagringspoolen har utrymme, ta reda på om tillväxten finns under containrar, overlay-lager, volymer, avbildningar eller byggcache. Kör inte en omfattande rensning innan aktiva data och data som går att återställa har klassificerats.

Kontrollera om containerloggar i JSON-format växer obegränsat

Granska loggdrivrutinen och storleken på varje containerloggfil. En tjänst kan lagra sina huvudsakliga data någon annanstans, samtidigt som stdout och stderr växer obegränsat under Dockers lokala containerkatalog.

Code Maven dokumenterar ett fall där docker system df inte avslöjade huvudproblemet eftersom standardloggfilen fortsatte att växa utan gräns utanför den sammanfattningen. Den dolda utrymmestjuven var en ständigt växande containerlogg.

Hitta och åtgärda programmets störande fel innan du roterar eller tömmer loggar. Konfigurera begränsad loggrotation för framtida containrar och kontrollera att de nya filerna slutar växa vid den förväntade gränsen.

Hitta data som skrivits till containerns skrivbara lager

Jämför de avsedda beständiga sökvägarna med programmets faktiska kataloger för cache, omkodning, nedladdningar, databaser, miniatyrbilder, säkerhetskopior och temporära filer. Alla skrivningar som inte är monterade blir kvar i containerns skrivbara lager på systemdisken.

En Dockerforumförklaring påpekar att skrivningar och ändrade bildfiler lagras i det skrivbara lagret, medan stora, oroterade loggar lagras i containermetadata. Båda kan göra att en container förbrukar nästan allt lokalt utrymme trots en extern datavolym.

Använd storleksrapportering per container och inspektera de största ändrade sökvägarna i containern. Lägg till uttryckliga bindmonteringar eller namngivna volymer endast för data som måste bevaras, och återskapa sedan containern för att ta bort föråldrat innehåll i det skrivbara lagret efter att du har säkerhetskopierat sådant som är värdefullt.

Verifiera att den externa monteringen fanns när containern startade

Kontrollera att SSD:n, NAS-resursen eller lagringspoolen monterades på den förväntade värdsökvägen innan Docker startade containern. Jämför enhetsidentiteten och monteringsutdata med katalogen som containern ser.

När en extern montering saknas kan den underliggande tomma katalogen i systemfilsystemet fortfarande finnas. Containern kan skriva till den reservkatalogen som vanligt, vilket gör att systemdisken växer medan den externa lagringspoolen verkar orörd.

Stoppa containern innan lagringen monteras om ovanpå befintliga reservdata. Flytta eller hantera de dolda filerna på ett säkert sätt, lägg till monteringsberoenden eller startkontroller och vägra starta programmet om den förväntade enheten saknas.

Inspektera avbildningslager, byggcache och övergivna objekt

Granska oanvända avbildningar, stoppade containrar, anonyma volymer och BuildKit-cache. Täta uppdateringar eller lokala byggen kan samla på sig många lager även när programmets beständiga data är korrekt monterade någon annanstans.

En förklaring i Moby-projektets forum klargör att överlagringsmonteringar kan göra diskutrymmesstatistik svårtolkad och att användningen av det underliggande filsystemet måste tolkas noggrant. Ett separat Home Assistant-fall visade också att overlay2 växte med tiden på grund av loggar och lager.

Ta bara bort objekt som har bekräftats vara oanvända av aktuella Compose-projekt och säkerhetskopior. Ta aldrig bort enskilda overlay2-kataloger manuellt, eftersom Dockers metadatalänkar då kan bli inkonsekventa.

Verifiera korrigeringen med en tillväxtbaslinje

När du har åtgärdat den ansvariga sökvägen loggar du användningen av Docker-rotkatalogen, loggstorlekar, skrivbara containerstorlekar och användningen av den externa lagringspoolen med jämna mellanrum under den belastning som tidigare orsakade tillväxten.

Arbetsflödet i ZimaSpace för att förbereda en stor NAS-överföring ger en repeterbar belastning som kan användas för att bekräfta att data hamnar på rätt lagringspool.

Problemet är löst först när tillväxten på systemdisken stämmer överens med förväntningarna för avbildningen och loggarna, beständiga programdata växer på den externa lagringspoolen och en saknad extern montering leder till ett säkert startfel i stället för att data skrivs obemärkt till rotfilsystemet.

Support och tips

Mer att läsa

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.