Så optimerar du jobb för fotominiatyrer kring säkerhetskopieringsfönster

Eva Wong är teknisk skribent och händig hemmabyggare på ZimaSpace. Som tekniknörd sedan barnsben med ett brinnande intresse för hemlabb och programvara med öppen källkodspecialiserar hon sig på att göra komplexa tekniska koncept begripliga genom praktiska, praktiska guider. Eva tycker att självhosting ska vara roligt, inte avskräckande. Genom sina handledningar hjälper hon communityn att göra hårdvaruinstallationer mindre mystiska, från att bygga sin första NAS till att bemästra Docker-containrar.

Generering av miniatyrbilder läser original, skriver många små härledda filer, uppdaterar databasrader och kan konkurrera om processorkraften med videokodning eller maskininlärning. Om den körs samtidigt som en NAS-säkerhetskopiering kan båda jobben ta längre tid och fördröjningen öka vid interaktiv bläddring bland foton.

Målet är inte att göra miniatyrbilder permanent långsamma. Mät vilken resurs som krockar med säkerhetskopieringen, minska endast den relevanta samtidigheten och ge varje tungt jobb ett definierat tidsfönster med en återställningsregel om det drar över tiden. Dokumentera de vanliga inställningarna för arbetare, så att tillfällig strypning inte blir en permanent begränsning utan att någon märker det.

Mät kollisionen innan du ändrar antalet arbetare

Kör en vanlig säkerhetskopiering utan någon eftersläpning i miniatyrbildskön och anteckna varaktighet, lagringsfördröjning, nätverkshastighet och processoranvändning. En annan dag bearbetar du en representativ omgång miniatyrbilder utan säkerhetskopieringstrafik och registrerar samma mätvärden.

Den begränsade resursen avgör lösningen. Hög diskfördröjning tyder på att läs- och skrivbelastning bör spridas ut i tiden. En överbelastad processor tyder på att antalet bildarbetare bör minskas. En hårt belastad databasvolym kan kräva att databaslagringen separeras från lagringen för härledda filer.

Immich tillhandahåller jobbköer och kontroller för arbetare, som beskrivs i dokumentationen om jobb och arbetare. Anteckna de aktuella värdena innan du ändrar dem, så att du enkelt kan återställa inställningarna om ett test misslyckas.

Definiera ett lugnt tidsfönster och en regel för överskridande

Lägg säkerhetskopieringar i det tidsfönster då kraven på återställning är som högst och reservera sedan ett efterföljande eller föregående tidsfönster för miniatyrbilder. Undvik att starta båda vid samma minut, eftersom köstarten kan leda till en störtflod av filöppningar och databasaktivitet.

Bestäm vad som ska hända om en säkerhetskopiering drar ut på tiden. En säker regel är att låta miniatyrbildsarbetarna fortsätta med minskad samtidighet eller pausa dem tills säkerhetskopieringen är klar och sedan återställa deras normala samtidighet, i stället för att låta två schemalagda processer överlappa utan kontroll.

Planera in tid för ikappkörning efter stora importer. Utan en sådan period kan en låg gräns för antalet arbetare på natten göra att användarna får vänta i flera dagar på miniatyrbilder, trots att resurser finns tillgängliga dagtid.

Finjustera samtidigheten utifrån flaskhalsen

Ändra en arbetarklass eller ett samtidighetsvärde åt gången och bearbeta en lika stor batch. Jämför hur snabbt kön töms med säkerhetskopieringens varaktighet och interaktiv latens i stället för att bara bedöma resultatet utifrån CPU-användningen.

Om originalen och säkerhetskopiorna delar hårddiskar hjälper det ofta mer att läsa färre bilder samtidigt än att höja CPU-gränsen. Om originalen ligger på snabb lagring men databasen är belastad bör du flytta eller skydda databasens arbetsbelastning innan du ökar antalet arbetare.

Se till att nätverksmonteringarna är tillförlitliga under båda åtgärderna. Guiden till nätverkslagring för Immich förklarar varför en monterad men stannad sökväg kan se ut som ett problem med ett programjobb.

Single board computer zimaboard2

Validera en fullständig cykel och återställ normal drift

Övervaka en fullständig säkerhetskopiering följd av en period för miniatyrbilder. Notera start- och sluttider, maximal lagringslatens, ködjup, misslyckade jobb och om användarna kan öppna de senaste fotona under cykeln.

När kön har tömts återställer du samtidigheten till det dokumenterade normalvärdet om den sänkta inställningen bara var avsedd som skydd under ikappkörningen. Permanent begränsning bör vara avsiktlig och grundas på uppmätta servicemål.

Ändringen fungerar om säkerhetskopieringen håller en förutsägbar varaktighet, miniatyrbildsköerna töms inom den planerade ikappkörningstiden och inga jobb misslyckas eller filer saknas. Återställ den senaste ändringen av samtidigheten om felfrekvensen eller databasens latens ökar.

Support och tips

Mer att läsa

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.