Hur länge bör du vänta innan du bedömer att en RAID-återuppbyggnad har fastnat?

Eva Wong är teknisk skribent och händig hemmabyggare på ZimaSpace. Som tekniknörd sedan barnsben med ett brinnande intresse för hemlabb och programvara med öppen källkodspecialiserar hon sig på att göra komplexa tekniska koncept begripliga genom praktiska, praktiska guider. Eva tycker att självhosting ska vara roligt, inte avskräckande. Genom sina handledningar hjälper hon communityn att göra hårdvaruinstallationer mindre mystiska, från att bygga sin första NAS till att bemästra Docker-containrar.

Kalla en RAID-återuppbyggnad avstannad först när antalet behandlade block inte ökar vid upprepade kontroller och loggarna inte visar någon avsiktlig paus, prioriteringsbegränsning, väntande fas eller återställningsbar omkörning. Enbart den förflutna tiden räcker inte som underlag.

Stora arrayer kan tillbringa timmar i ett långsamt område, ändra hastighet kraftigt vid programbelastning eller pausa mellan återuppbyggnad och verifiering. Kontrollera att arbetet fortskrider genom räknare och loggar innan du ingriper, eftersom det kan vara mer riskabelt att stoppa eller montera ihop en array på nytt än att vänta.

Använd förändringen i förloppet, inte en enskild procentsats

Anteckna exakt antal behandlade block, procentandel, hastighet och uppskattad sluttid med fasta intervall. Återuppbyggnaden fortskrider när blockantalet ökar, även om den avrundade procentandelen är oförändrad. I flerteterabyte-arrayer kan en tiondels procent som visas motsvara en stor arbetsmängd.

Kontrollera styrenheten eller operativsystemet i samma gränssnitt varje gång. Olika instrumentpaneler kan cachelagra status eller rapportera olika faser. En förloppsindikator som verkar ha stannat medan blockräknarna ökar är ett övervakningsproblem, inte en avstannad återuppbyggnad.

Uppskatta en lokal referensnivå i stället för att använda en universell tidsgräns

Det finns inget universellt antal timmar som alltid är säkert. Återuppbyggnadstiden beror på använd kapacitet, RAID-layout, hårddiskarnas hastighet, fel, styrenhetens policy, bakgrundsbelastning och på om implementationen kopierar alla block eller bara allokerade områden.

Använd den första stabila timmen för att uppskatta ett ungefärligt intervall och jämför sedan med senare intervall. En mycket låg omsynkroniseringshastighet i mdadm kan bero på arbetsbelastning, justering, länkbeteende eller en hårddisk som håller på att fallera; en korrekt diagnos kräver mer än att höja hastighetsgränsen.

Leta efter en avsiktlig paus eller en ny fas

Vissa system begränsar återställningstakten för att skydda förgrunds-I/O, pausar scrubbar under resilvering, väntar på att en reservdisk ska tilldelas eller går från återuppbyggnad till paritetsinitiering eller konsekvenskontroll. Statusen kan fortfarande visa ”återuppbyggnad” trots att den aktiva uppgiften har ändrats.

Kontrollera schemalagt underhåll, ströminställningar, temperaturgränser, återuppbyggnadsprioritet och programtrafik. Om hastigheten ökar när belastningen från förgrundsprogram minskar är matrisen resursbegränsad snarare än fast.

Upprepade läsfel leder till ett verkligt stopp

En källenhet kan försöka läsa en svag sektor under lång tid, vilket gör att genomströmningen sjunker kraftigt nära samma blockområde. Om styrenheten till slut rapporterar ett oläsbart fel kan återuppbyggnaden avbrytas eftersom redundansen inte kan återskapa det området.

En återuppbyggnad som stoppats av läsfel visar varför det är viktigt att känna till det sista lyckade blocket och kärnfelet som kom direkt efteråt. Starta inte upprepade gånger om en återställning som misslyckas vid samma adress utan att först skydda data och undersöka källenheten.

Noll hastighet med aktivitet i loggen kan betyda att nya försök görs

En visad hastighet på noll kan förekomma vid kommandoupprepningar, enhetsåterställningar, felåterställning, metadatauppdateringar eller en tillfällig paus. Håll koll på diskarnas upptid, ködjup, styrenhetshändelser och kärnmeddelanden. Upprepade återställningar eller tidsgränsfel är inte tecken på fungerande framsteg.

En återställning som avbryts upprepade gånger visar också att alla stopp inte beror på ett uppenbart SMART-fel. Notera den exakta punkten och alla loggar i stället för att anta att en ny disk eller en högre hastighetsinställning löser problemet.

Använd en praktisk tabell för bedömning av stopp

Observation över två eller fler intervall Tolkning Åtgärd
Antalet behandlade block ökar Långsamt men framåt Fortsätt övervaka
Procentandelen är oförändrad, antalet block ökar Avrundning i visningen Vänta
Blocken är oförändrade, uppgiften anges som pausad Avsiktligt stopp Ta reda på orsaken till pausen eller policyn
Blocken är oförändrade, upprepade omförsök/återställningar Problem med hårdvara eller sökväg Minska skrivningar; inspektera källenheten och anslutningen
Stannar vid samma block efter omstart Bestående oläsbart område Skydda data; undvik blinda omförsök
99.9% med en aktiv efterföljande fas Slutförande eller metadataarbete Verifiera åtgärdens beteckning och loggar

Kräv tecken från minst två oberoende signaler innan du bedömer att återuppbyggnaden har fastnat: inga räknare rör sig, plus ett fel, ett avbrutet tillstånd eller samma bestående stoppunkt.

Vad du bör göra innan du startar om något

  1. Spara information om arrayen, medlemmarnas serienummer, räknare för behandlade block och hela händelseloggen.
  2. Minska onödig I/O från program och bekräfta att mål- och källdiskarna fortfarande identifieras.
  3. Kontrollera SMART-indikatorer för mediefel samt räknare för länkåterställningar eller CRC-fel på varje aktiv källenhet.
  4. Bekräfta att processen inte är pausad och att den inte påverkas av en temperaturgräns eller prioritetsinställning, och att ingen verifieringsfas ligger i kö.
  5. Gå vidare till säkerhetskopiering, avbildning eller återställning när samma oläsbara intervall stoppar upprepade försök.

Använd inte kommandon för att stoppa, montera, tvångsansluta eller rensa metadata innan du känner till arrayens tillstånd och den exakta implementationen.

Jämför förloppet under ett lugnt intervall

Ett användbart test för att avgöra om processen har fastnat kräver ett kontrollerat observationsfönster. Pausa stora överföringar och schemalagda jobb och registrera sedan räknarna i början och slutet av intervallet. Då går det att skilja belastning från förgrundsprocesser från en återställningsprocess som inte kan göra framsteg på egen hand.

Om förloppet återupptas när belastningen minskar kan du välja en lägre underhållsprioritet eller ett lugnare schema. Om räknarna står stilla och samma fel återkommer ger ytterligare väntan utan undersökning föga ny information.

Vanliga frågor

Har processen automatiskt fastnat om den står på 99.9 procent i en timme?

Nej. De sista metadatauppdateringarna eller en verifieringsfas kan ta tid. Kontrollera om antalet behandlade block, enhetsskrivningar eller operationens status fortfarande ändras innan du ingriper.

Ska jag höja hastighetsgränsen för ombyggnaden?

Först när du har bekräftat att diskarna är friska och att I/O-policyn för förgrundsprocesser är flaskhalsen. En högre gräns kan försämra programmets svarstid och belasta en redan svag källdisk ytterligare.

När ska jag sluta vänta?

Sluta betrakta det som normalt när räknarna är oförändrade vid upprepade kontroller och loggarna visar ett avbrott, återkommande enhetsåterställning, oläsbart block eller fel vid samma blockintervall.

Den praktiska definitionen av att ha fastnat

En ombyggnad har fastnat när det mätbara arbetet har upphört och systemet inte kan förklara pausen med en policy, belastning eller en ny fas. Använd räknare och felinformation, inte oro eller klocktid.

Support och tips

Mer att läsa

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.