Como otimizar as tarefas de criação de miniaturas de fotografias em função dos horários das cópias de segurança

Eva Wong é a redatora técnica e entusiasta residente na ZimaSpace. Uma geek desde sempre, apaixonada por homelabs e software de código aberto, dedica-se a traduzir conceitos técnicos complexos em guias práticos. A Eva acredita que a auto-hospedagem deve ser divertida, não intimidante. Através dos seus tutoriais, ajuda a comunidade a desmistificar configurações de hardware, desde montar o primeiro NAS até dominar os contentores Docker.

A geração de miniaturas lê os originais, escreve muitos ficheiros derivados de pequena dimensão, atualiza registos na base de dados e pode competir com a codificação de vídeo ou a aprendizagem automática pela capacidade da CPU. Se for executada durante uma cópia de segurança para um NAS, pode prolongar ambas as tarefas e aumentar a latência ao navegar pelas fotografias.

O objetivo não é tornar a geração de miniaturas permanentemente lenta. Meça qual o recurso que entra em conflito com a cópia de segurança, reduza apenas a concorrência relevante e atribua a cada tarefa intensiva uma janela definida, com uma regra de recuperação caso se prolongue para além do previsto. Documente as definições normais dos trabalhadores, para que a limitação temporária não se transforme num limite permanente sem que ninguém se aperceba.

Meça a interferência antes de alterar o número de trabalhadores

Execute uma cópia de segurança normal, sem tarefas de miniaturas pendentes, e registe a duração, a latência do armazenamento, o débito da rede e a utilização da CPU. Noutro dia, processe um lote representativo de miniaturas sem tráfego de cópias de segurança e recolha as mesmas métricas.

O recurso sob pressão determina a solução. Uma latência elevada do disco sugere escalonar as cargas de leitura e escrita; uma CPU saturada sugere reduzir o número de trabalhadores de imagens; um volume de base de dados sobrecarregado pode exigir que o armazenamento da base de dados seja separado do armazenamento dos ficheiros derivados.

O Immich disponibiliza filas de tarefas e controlos dos trabalhadores, descritos na sua documentação sobre tarefas e trabalhadores. Registe os valores atuais antes de os editar, para que possa reverter facilmente caso a experiência falhe.

Defina uma janela de baixa atividade e uma regra para atrasos

Coloque as cópias de segurança na janela em que a necessidade de recuperação é maior e reserve uma janela seguinte ou anterior para processar as miniaturas. Evite iniciar ambos no mesmo minuto, pois o arranque das filas pode provocar um pico de aberturas de ficheiros e de atividade da base de dados.

Defina o que acontece se uma cópia de segurança demorar demasiado. Uma regra segura é manter os trabalhadores de miniaturas com o número reduzido ou em pausa até a cópia de segurança indicar que terminou e, em seguida, repor a concorrência normal, em vez de permitir que dois agendamentos se sobreponham sem controlo.

Reserve um período de recuperação após grandes importações. Sem isso, um limite baixo de trabalhadores durante a noite pode deixar os utilizadores à espera de miniaturas durante dias, apesar de haver recursos disponíveis durante o dia.

Ajustar a concorrência ao estrangulamento

Altere uma classe de trabalhadores ou um valor de concorrência de cada vez e processe um lote do mesmo tamanho. Compare a velocidade de esvaziamento da fila com a duração da cópia de segurança e a latência interativa, em vez de avaliar o sucesso apenas pela utilização da CPU.

Se os originais e as cópias de segurança estiverem nos mesmos HDD, reduzir o número de leituras simultâneas de imagens costuma ser mais eficaz do que aumentar o limite da CPU. Se os originais estiverem num armazenamento rápido, mas a base de dados estiver ocupada, transfira ou proteja a carga de trabalho da base de dados antes de aumentar o número de trabalhadores.

Mantenha as montagens de rede fiáveis durante ambas as operações. O guia de armazenamento em rede do Immich explica por que motivo um caminho montado, mas bloqueado, pode parecer um problema com uma tarefa da aplicação.

Validar um ciclo completo e repor o funcionamento normal

Observe um ciclo completo de cópia de segurança, seguido de um período de geração de miniaturas. Registe as horas de início e de fim, a latência máxima do armazenamento, a dimensão da fila, as tarefas falhadas e se os utilizadores conseguem abrir fotografias recentes durante o ciclo.

Depois de esvaziar a fila de espera, reponha a concorrência no valor normal documentado, caso a definição reduzida tenha servido apenas para proteger o período de recuperação. A limitação permanente deve ser intencional e basear-se em objetivos de serviço medidos.

A alteração é aprovada quando a duração das cópias de segurança se mantém previsível, as filas de miniaturas são esvaziadas dentro do período de recuperação planeado e não surgem tarefas falhadas nem recursos em falta. Reverta a última alteração à concorrência se a taxa de erros ou a latência da base de dados aumentar.

Assistência e dicas

Mais para ler

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.