Vilka är varningssignalerna på att en databaskontainer har skadats av ett strömavbrott?

Eva Wong är teknisk skribent och händig hemmabyggare på ZimaSpace. Som tekniknörd sedan barnsben med ett brinnande intresse för hemlabb och programvara med öppen källkodspecialiserar hon sig på att göra komplexa tekniska koncept begripliga genom praktiska, praktiska guider. Eva tycker att självhosting ska vara roligt, inte avskräckande. Genom sina handledningar hjälper hon communityn att göra hårdvaruinstallationer mindre mystiska, från att bygga sin första NAS till att bemästra Docker-containrar.

Misstänk korruption om databasen inte kan slutföra normal kraschåterställning eller därefter rapporterar inkonsekvenser i kontrollsummor, sidor, loggsekvenser, tabeller eller index.

En oren avstängning betyder inte automatiskt att databasen är korrupt. PostgreSQL, MySQL, MariaDB och liknande motorer använder journaler eller skrivförhandsloggar just för att återställa bekräftat tillstånd. Varningsgränsen passeras när återställningen upprepas, motorn avslutas, samma fråga träffar ogiltiga sidor, kontrollsummor misslyckas, tabeller försvinner, index motsäger tabelldata eller säkerhetskopior och integritetskontroller inte kan läsa klustret konsekvent.

Skilj normal kraschåterställning från en återställningsloop

Spara den första startloggen efter att strömmen har kommit tillbaka. Anteckna om motorn spelar upp loggarna en gång och blir redo, eller om den startar om upprepade gånger, går in i tvingad återställning eller stannar vid samma post eller sida.

InnoDB kan rapportera att möjliga halvskrivna sidor återställs efter ett avbrutet skrivförlopp. Meddelandet visar att motorn försöker utföra säker kraschåterställning, men upprepade fel kan tyda på InnoDB-fel efter strömavbrott.

En lyckad återställning följd av normala kontroller bevisar inte att det finns korruption. En loop, ett kritiskt påstående, en upprepad signal eller oförmåga att nå ett färdigt tillstånd är en stoppsignal: kopiera råfiler och testa säkerhetskopior innan fler skrivningar sker.

Leta efter fel med kontrollsummor och ogiltiga sidor

Sök i loggarna efter kontrollsummemismatch, sidverifiering misslyckades, ogiltig sida i block, skadad sida, kort läsning, felaktigt magiskt tal eller oväntat filslut. Anteckna den angivna relationen, tabellen, blocket eller tabellutrymmet.

pganalyze visar hur PostgreSQL-korruption yttrar sig som fel i sidkontrollsummor följda av ett fel för ogiltig sida när den skadade sidan läses.

Tysta inte felet och nollställ inte skadade sidor innan du har bevarat bevismaterial och bekräftat att säkerhetskopiorna täcker det som behövs. Att samma block misslyckas efter flera omstarter är starkare bevis än en tillfällig tidsgränsöverskridning i programmet.

Håll utkik efter frågor som misslyckas endast för vissa rader eller tabeller

Kör skrivskyddade kontroller mot tabeller och frågor som programmet normalt använder. Korruption kan förbli oupptäckt tills en genomsökning, vakuumkörning, säkerhetskopiering eller förfrågan läser en skadad sida.

En PostgreSQL-analys förklarar att en kontrollsummemismatch pekar på ett problem under databasen, medan en ogiltig sida utan en kontrollsummavarning ändå kan bero på lagring, minne, filsystemet eller oavsiktlig filskada. Det praktiska symtomet är en återkommande läsning av en ogiltig sida vid vanliga frågor.

Dokumentera exakt vilken fråga och vilket objekt som misslyckas. Låt inte programmet fortsätta att utföra omfattande skrivningar när bara delar av databasen går att läsa, eftersom nytt tillstånd kan försvåra återställning och säkerhetskopiering.

Kontrollera om det finns inkonsekvenser i index, transaktioner och metadata

Varningssignaler är dubbla nycklar som bryter mot ett unikt index, saknade rader som går att hitta via en åtkomstväg men inte en annan, ogiltiga transaktions-ID:n, skadade TOAST- eller datasegment för stora värden och index som inte klarar valideringen.

Credativs genomgång av korruption konstaterar att kluster utan datakontrollsummor kan uppvisa skador genom lågnivåfel som ogiltiga sidor, problem med transaktions-ID:n, inkonsekvenser i TOAST eller krascher i backendprocesser. Vissa säkerhetskopior som skapas genom att kopiera filer kan bevara skadade sidor utan att upptäcka dem.

Kör integritets- och indexkontroller som stöds på en kopia eller under ett kontrollerat underhållsfönster. Omindexering kan reparera ett skadat härlett index, men den reparerar inte skadade tabelldata eller den underliggande lagringen.

Koppla databasfel till varningar från filsystemet och lagringen

Granska loggarna för värdens kärna, filsystem, lagringspool, enhet, styrenhet, UPS och containerkörmiljö kring avbrottet. Leta efter I/O-fel, återställningar, kontrollsummefel, ommonteringar i skrivskyddat läge, degraderade pooler samt filer som saknas eller har kapats.

En guide för databasåterställning konstaterar att strömavbrott och defekt minne kan orsaka skrivningar av skadade sidor, särskilt när lagringens beteende inte stämmer med databasens antaganden om beständighet. Sådana händelser på värdnivå hjälper till att skilja korruption av InnoDB-sidor från en vanlig omstart av programmet.

Åtgärda lagringsvägen innan du återställer en ren databas till den. En lyckad logisk återställning till ett lagringsmedium som håller på att fallera kan återskapa incidenten eller skada ersättningen utan att det märks.

Stoppa skrivningar och säkerställ att återställningen från en ren säkerhetskopia fungerar

Om tecken på korruption återkommer ska du stoppa beroende program, ta en ögonblicksbild av eller klona den berörda volymen om det är säkert och bevara loggar och konfiguration. Testa den senaste säkerhetskopian på separat lagringsutrymme innan du ändrar det ursprungliga klustret.

ZimaSpaces checklista för säkerhetskopiering av Docker-programdata anger vad som måste finnas innan ett destruktivt försök att återställa databasen påbörjas.

Systemet är tillförlitligt först när den återställda databasen startar utan problem, integritetskontrollerna godkänns, representativa frågor och skrivningar fungerar, säkerhetskopieringen slutförs och värdens lagring inte rapporterar några nya fel. Lägen för framtvingad återställning bör användas för att rädda data enligt en dokumenterad återställningsplan, inte vid normal drift.

Support och tips

Mer att läsa

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.