Cosa causa la modifica dei checksum dei file dopo la copia tramite una condivisione SMB?

Eva Wong è la redattrice tecnica e appassionata di tecnologia di ZimaSpace. Geek da sempre, appassionata di homelab e software open source, è specializzata nel tradurre concetti tecnici complessi in guide pratiche. Eva crede che l’hosting autonomo debba essere divertente, non intimidatorio. Attraverso i suoi tutorial, aiuta la community a comprendere meglio le configurazioni hardware, dalla costruzione del primo NAS alla padronanza dei container Docker.

Di norma SMB trasferisce i byte dei file senza modificarli, quindi una differenza nei checksum indica che il contenuto confrontato è cambiato, è stato letto in modo incoerente oppure non corrispondeva allo stesso flusso di dati.

La differenza può dipendere dal calcolo dell'hash della sorgente prima che un'applicazione termini la scrittura, dal confronto tra un resource fork o un flusso alternativo su un lato, dalla riscrittura della destinazione da parte di un'applicazione multimediale o di sicurezza, dalla lettura tramite una cache client obsoleta oppure da errori di archiviazione e trasporto. Il test corretto consiste nel bloccare la sorgente, calcolare l'hash di entrambi i file con lo stesso strumento e la stessa modalità, quindi ripetere il trasferimento attraverso un percorso controllato prima di attribuire la colpa a SMB.

Verifica che entrambi i checksum coprano gli stessi dati del file

Annota il percorso esatto della sorgente, il percorso della destinazione, le dimensioni del file, il comando di hashing, l'algoritmo, la modalità binaria o testo e l'ora in cui è stato generato ciascun checksum. Verifica che nessuno dei due comandi abbia letto un collegamento, la destinazione di un link simbolico, un file temporaneo o un file sidecar.

L'utility SHA-256 calcola un digest dai byte letti dal file specificato. Il riferimento di sha256sum consiglia di usare lo stesso algoritmo e lo stesso comando su entrambi gli endpoint.

Se le dimensioni differiscono, verifica se la copia è incompleta o è stata modificata prima di confrontare gli hash. Se le dimensioni coincidono ma gli hash differiscono, verifica la stabilità della sorgente, l'ambito del flusso, le letture dell'archiviazione e le modifiche alla destinazione.

Blocca le applicazioni che possono modificare il file sorgente durante la copia

Arresta database, client di download, macchine virtuali, editor multimediali, strumenti di sincronizzazione e qualsiasi applicazione che scriva nel file sorgente. Genera un nuovo checksum del file sorgente solo dopo averlo chiuso.

La documentazione di rsync avverte che i file dovrebbero essere spostati in una directory sorgente monitorata solo dopo essere stati scritti completamente, perché un file sorgente che cambia può essere trasferito in modo incoerente.

Confronta il checksum della sorgente prima e subito dopo la copia SMB. Se i due hash della sorgente sono diversi, SMB non è la causa iniziale: la sorgente è cambiata durante il test.

Controlla gli oplock, le scritture locali e lo stato dei file memorizzati nella cache

Elenca gli handle SMB aperti e i processi locali che accedono alla sorgente e alla destinazione. Fai particolare attenzione quando la stessa condivisione viene modificata simultaneamente via SMB e direttamente sull’host NAS.

Samba spiega che gli oplock consentono a un client di memorizzare localmente nella cache le modifiche ai file e sincronizzarle con il server quando necessario. Il suo modello di lock e oplock mostra perché durante i test di integrità occorre controllare le scritture simultanee locali e via SMB.

Non disabilitare gli oplock a livello di server come prima misura. Chiudi le applicazioni in conflitto, apri una nuova sessione e ripeti la copia di un file per verificare se era coinvolta una scrittura simultanea.

Separa il contenuto dei file dagli attributi estesi e dai flussi alternativi

Stabilisci se il checksum previsto copre solo i dati del file principale o un archivio che include anche fork di risorse, attributi estesi, flussi alternativi, ACL e metadati. Usa lo stesso ambito su entrambi i lati.

ArchWiki descrive gli attributi estesi come metadati memorizzati separatamente dai normali contenuti dei file. La perdita o la traduzione di questi metadati può modificare l’hash di un archivio o di un pacchetto senza cambiare il checksum del flusso di dati principale.

Per i file macOS, confronta separatamente il fork di dati principale e gli eventuali fork di risorse o file sidecar AppleDouble. Non considerare una mancata corrispondenza dei metadati come prova che i byte del file principale siano cambiati.

Usa uno strumento di copia con riavvio e registrazione dei log

Ripeti il trasferimento con un metodo di copia noto e un nuovo nome file di destinazione. Salva i log di tentativi, riavvii, salti ed errori invece di affidarti alla finestra di avanzamento del browser dei file.

Microsoft definisce SMB come un protocollo che consente alle applicazioni di leggere, creare e aggiornare file remoti. Il suo modello di accesso ai file SMB supporta l’interpretazione di un checksum modificato come un problema del percorso dei dati o del processo di scrittura, non come una trasformazione prevista dal protocollo.

Se una copia eseguita da riga di comando con registrazione corrisponde, mentre il trascinamento non corrisponde, confronta l’applicazione, il comportamento ai nuovi tentativi, la gestione dei file parziali, la scansione antivirus e l’elaborazione successiva, invece di modificare il server SMB.

Confronta la destinazione prima che gli indicizzatori o le applicazioni la riscrivano

Calcola l’hash della destinazione subito dopo la copia, mentre il file è chiuso e prima che scanner multimediali, convertitori di documenti, gestori di foto, strumenti antivirus o client di sincronizzazione possano modificarlo.

La guida di Robocopy della Oregon State sottolinea l’importanza della copia registrata e ripristinabile, che permette di distinguere più chiaramente il completamento del trasferimento dagli interventi successivi delle applicazioni sulla destinazione.

Se l’hash della destinazione corrisponde subito dopo la copia ma cambia in seguito, identifica il primo processo che apre il file in scrittura. La soluzione permanente riguarda il comportamento dell’applicazione in materia di metadati, ottimizzazione o sincronizzazione.

Ripeti il test tra i confini dello storage e della rete

Copia lo stesso file di test chiuso in locale sul NAS di origine, in locale sul filesystem di destinazione, tramite SMB da un altro client e tramite il client originale. Calcola l’hash dopo ogni passaggio.

La guida di ZimaSpace alla conservazione dei metadati durante la migrazione NAS fornisce la regola correlata: gli hash dei contenuti e i campi dei metadati devono essere convalidati come criteri di accettazione separati.

Il problema è risolto quando un file sorgente chiuso produce hash identici tra copie ripetute e rimane invariato dopo l’esecuzione dei servizi post-copia. Interrompi la migrazione e proteggi la sorgente se le discrepanze riguardano sempre lo stesso disco, controller, client o offset ripetibile nel file.

Assistenza e consigli

Altre letture

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.