Dubbele foto's voorkomen na migratie vanuit een cloudbibliotheek

Eva Wong is de technisch schrijver en vaste knutselaar bij ZimaSpace. Als levenslange geek met een passie voor homelabs en open-sourcesoftwareis ze gespecialiseerd in het vertalen van complexe technische concepten naar toegankelijke, praktische handleidingen. Eva vindt dat self-hosting leuk moet zijn en niet intimiderend. Met haar tutorials helpt ze de community om hardware-installaties te doorgronden, van het bouwen van hun eerste NAS tot het beheersen van Docker-containers.

Voorkom dubbele foto's door eerst één canonieke export te importeren en pas back-ups vanaf telefoons in te schakelen nadat exacte kopieën en bewerkte varianten zijn ingedeeld.

Migraties van cloudbibliotheken bevatten vaak originelen, bewerkte kopieën, verkleinde downloads, versies uit gedeelde albums, Live Photo-componenten, metadata-sidecars en herhaalde exportmappen. Een zelfgehoste galerij kan duplicaten met identieke bytes weigeren, maar toch visueel identieke bestanden accepteren waarvan de compressie, afmetingen, metadata of bestandsnamen verschillen. Een veilige werkwijze zet de migratie buiten de actieve bibliotheek klaar, registreert hashes en bronmappen, importeert één gecontroleerde batch en controleert hoe de galerij varianten weergeeft voordat automatische back-ups vanaf telefoons worden ingeschakeld.

Inventariseer alle bronnen die dezelfde foto kunnen bevatten

Maak een lijst van de cloudexportarchieven, de filmrol van de telefoon, de fotobibliotheek op de desktop, gedeelde albums, downloadmappen, bibliotheken van partners, oude NAS-mappen en externe bibliotheken die in de galerij zijn aangekoppeld. Noteer voor elke bron de datumbereiken en het aantal bestanden.

Duplicaten ontstaan vaak doordat eerst een cloudkopie wordt geïmporteerd en de telefoon vervolgens het lokale origineel uploadt. In een Immich-discussie wordt beschreven dat Google Photos en mobiele back-ups schijnbare duplicaten opleveren omdat de cloudversie was gecomprimeerd, terwijl de telefoon een ander bestand met de volledige resolutie aanleverde.

Bepaal welke bron leidend is voor de originelen. Houd de andere bronnen offline tijdens de eerste import, zodat een tijdlijn vol duplicaten niet de omgeving wordt waarin wordt bepaald wat je moet verwijderen.

Onderscheid exacte duplicaten van visuele varianten

Genereer cryptografische hashes voor bestanden voordat je ze importeert. Overeenkomende hashes duiden op identieke bytes, terwijl verschillende hashes kunnen wijzen op bewerkingen, hercompressie, gewijzigde metadata, exports met een ander formaat, componenten van bewegingsfoto's of werkelijk verschillende opnamen.

Gebruikers die naar Immich migreren, hebben hashcontroles vóór het importeren ingebouwd, omdat overdrachten naar externe bibliotheken mogelijk niet dezelfde duplicaatcontrole uitvoeren als uploads via de API. De gemelde strategie was om hashes te vergelijken voordat bestanden worden gekopieerd.

Verwijder bestanden niet automatisch alleen omdat ze er in een miniatuur hetzelfde uitzien. Bewaar het origineel met de hoogste resolutie, de beoogde bewerking, bewegingscomponenten en metadata-sidecars totdat ze buiten de galerij met elkaar zijn vergeleken.

Normaliseer de structuur van de exportmappen zonder de originelen te wijzigen

Pak elk cloudarchief uit naar een tijdelijke map en identificeer dubbele archiefdelen, achtervoegsels als “original” en “edited”, JSON-sidecars, albumduplicaten en bestanden die over meerdere exportpakketten zijn verdeeld.

Laat bestandsnamen en tijdstempels ongewijzigd tijdens de eerste inventarisatie. Door vóór het hashen bestanden een andere naam te geven, opnieuw te coderen of metadata te herschrijven, kunnen exacte duplicaten bestanden met verschillende bytes worden die de galerij niet meer automatisch kan herkennen.

Maak een manifest met het bronarchief, het oorspronkelijke relatieve pad, de bestandsnaam, hash, grootte, afmetingen, opnametijd en het pad naar de sidecar. Zo kan elke latere verwijdering ongedaan worden gemaakt en wordt duidelijk waarom twee vergelijkbare items in de bibliotheek terechtkwamen.

Importeer eerst een kleine, representatieve batch

Selecteer een batch met een gewone JPEG, HEIC-foto, bewerkte afbeelding, Live Photo, video, burst, kopie uit een gedeeld album en twee exacte duplicaten. Importeer deze via dezelfde methode die je voor de volledige bibliotheek wilt gebruiken.

Cloud- en lokale items kunnen twee keer in een mobiele tijdlijn voorkomen, zelfs wanneer het ene de serverkopie is en het andere alleen op de telefoon blijft staan. Een Immich-melding documenteert foto's die zowel met de status cloud als cloud uit worden weergegeven.

Controleer of de galerij identieke hashes afwijst, bewegingscomponenten groepeert, bewerkingen behoudt, sidecars leest en onderscheid maakt tussen alleen lokaal aanwezige en geüploade items. Pas de importmethode aan voordat je opschaalt naar de volledige export.

Schakel mobiele back-up pas in wanneer de historische import stabiel is

Pauzeer automatische back-up op elke telefoon waarop een deel van de gemigreerde cloudbibliotheek staat. Anders kan de mobiele client duizenden items uploaden terwijl de server dezelfde geschiedenis nog uit geëxporteerde bestanden importeert.

Duplicaten tussen bronnen kunnen opnieuw ontstaan nadat een gebruiker een kopie in de externe bibliotheek behoudt maar de upload verwijdert, omdat de mobiele client hetzelfde item later mogelijk opnieuw uploadt. Een Immich-discussie beschrijft een terugkerende duplicatielus tussen mobiel en een externe bibliotheek.

Vergelijk na afloop van de historische import het aantal items in de wachtrij op de telefoon met het servermanifest. Schakel eerst back-up in voor een klein recent album en controleer of bekende historische items worden overgeslagen of als al geback-upt worden weergegeven.

Beheer externe en geüploade bibliotheken bewust

Bepaal of gemigreerde bestanden worden opgeslagen als uploads die door de galerij worden beheerd of als een externe, alleen-lezenbibliotheek. Voorkom dat dezelfde fysieke bestanden via beide routes worden weergegeven.

Het verplaatsen van bestanden uit de beheerde bibliotheek naar een externe bibliotheek kan dubbele vermeldingen in de tijdlijn opleveren wanneer de oude databaserecord blijft bestaan en de nieuwe externe scan nog een bestand toevoegt. Het gemelde resultaat was een verweesd record plus een nieuw duplicaat.

Gebruik één eigendomsmodel per bestandsverzameling. Maak bij een overstap een back-up van de database, voltooi de ondersteunde verwijdering of opschoning van het oude pad en controleer of verouderde records verdwijnen voordat je de nieuwe locatie scant.

Controleer duplicaten aan de hand van metagegevens en herstelcontext

Wanneer de galerij duplicaten vindt, vergelijk dan de resolutie, bestandsgrootte, codec, opnametijd, bewerkingsgeschiedenis, koppeling met Live Photos, albumlidmaatschap, favorieten, gezichtslabels en back-upbron voordat je kiest welk bestand je behoudt.

Detectie van bijna-duplicaten kan verschillende resoluties of coderingen van dezelfde scène herkennen, maar kan niet bepalen welke versie de bewerking van de gebruiker behoudt of het origineel van de hoogste kwaliteit is. Gebruik geautomatiseerde detectie als een wachtrij voor controle, niet als een opdracht om te verwijderen.

De NAS-gegevensmigratiegids van ZimaSpace biedt de bijbehorende richtlijn: bewaar de cloudexport en de oorspronkelijke bibliotheek totdat aantallen bestanden, metagegevens, albums en representatieve herstelacties zijn gecontroleerd.

Rond de migratie af met een reproduceerbare audit

Vergelijk bronmanifesten, aantallen geïmporteerde bestanden, afgewezen exacte duplicaten, behouden varianten, mislukte bestanden en het aantal wachtende bestanden op telefoons. Controleer steekproefsgewijs meerdere jaren, albums, bewerkingen, video's en Live Photos.

Houd de oorspronkelijke cloudexport ongewijzigd en maak een tweede back-up van de zelfgehoste bibliotheek voordat je een abonnement opzegt of cloudbestanden verwijdert. Duplicaten opschonen is geen back-up en mag nooit de enige bewerking zijn waarbij kopieën veranderen.

De migratie is voltooid wanneer elk origineel één bewust gekozen canonieke kopie heeft, bewerkte varianten herkenbaar blijven, telefoons alleen nieuwe bestanden uploaden, externe en beheerde bibliotheken elkaar niet overlappen en het manifest alle uitgesloten of behouden duplicaten verklaart.

Ondersteuning en tips

Meer om te lezen

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.