Quels sont les signes indiquant qu’un conteneur de base de données a été endommagé par une coupure de courant ?

Eva Wong est la rédactrice technique et bricoleuse résidente chez ZimaSpace. Geek depuis toujours, passionnée par les laboratoires informatiques personnels et les logiciels open source, elle se spécialise dans la vulgarisation de concepts techniques complexes au moyen de guides pratiques et concrets. Eva pense que l’hébergement personnel doit être amusant, et non intimidant. À travers ses tutoriels, elle aide la communauté à démystifier les configurations matérielles, de la construction de leur premier NAS à la maîtrise des conteneurs Docker.

Suspectez une corruption lorsque la base de données ne parvient pas à terminer une récupération normale après incident ou signale ensuite des incohérences de somme de contrôle, de page, de séquence de journaux, de table ou d’index.

Un arrêt incorrect ne signifie pas automatiquement que la base de données est corrompue ; PostgreSQL, MySQL, MariaDB et les moteurs similaires utilisent des journaux ou des journaux d’écriture anticipée précisément pour récupérer l’état validé. Le seuil d’alerte est atteint lorsque la récupération se répète, que le moteur s’arrête, qu’une même requête rencontre des pages invalides, que les sommes de contrôle échouent, que des tables disparaissent, que les index contredisent les données des tables, ou que les sauvegardes et les contrôles d’intégrité ne parviennent pas à lire le cluster de manière cohérente.

Distinguez une récupération normale après incident d’une boucle de récupération

Conservez le premier journal de démarrage après le retour du courant. Notez si le moteur rejoue les journaux une fois puis devient opérationnel, ou s’il redémarre à répétition, passe en mode de récupération forcée ou s’arrête au même enregistrement ou à la même page.

InnoDB peut signaler la restauration de pages potentiellement partiellement écrites après une interruption d’écriture ; ce message indique que le moteur tente une récupération après incident en toute sécurité, mais des échecs répétés peuvent indiquer des erreurs InnoDB après une panne.

Une récupération réussie suivie de vérifications normales ne prouve pas l’absence de corruption. Une boucle, une assertion fatale, un signal répété ou l’impossibilité d’atteindre l’état prêt impose d’interrompre les opérations, de copier les fichiers bruts et de tester les sauvegardes avant toute nouvelle écriture.

Recherchez les erreurs de somme de contrôle et de page invalide

Recherchez dans les journaux les mentions « checksum mismatch », « page verification failed », « invalid page in block », « corrupt page », « short read », « bad magic number » ou « unexpected end-of-file ». Notez la relation, la table, le bloc ou l’espace de tables indiqué.

pganalyze montre que la corruption de PostgreSQL se manifeste par des échecs de somme de contrôle de page, suivis d’une erreur de page invalide à la lecture du bloc endommagé.

Ne masquez pas l’erreur et ne mettez pas à zéro les pages endommagées avant d’avoir préservé les preuves et confirmé la couverture des sauvegardes. Le fait qu’un même bloc échoue après plusieurs redémarrages constitue une preuve plus solide qu’un délai d’attente ponctuel de l’application.

Surveillez les requêtes qui échouent uniquement sur certaines lignes ou tables

Effectuez des vérifications en lecture seule sur les tables et les requêtes habituellement utilisées par l’application. La corruption peut rester cachée jusqu’à ce qu’une analyse, une opération VACUUM, une sauvegarde ou une requête touche une page endommagée.

Une analyse de PostgreSQL explique qu’une discordance de somme de contrôle indique un problème en dessous de la base de données, tandis qu’une page invalide sans avertissement de somme de contrôle peut tout de même révéler un problème de stockage, de mémoire, de système de fichiers ou une détérioration accidentelle de fichier. Le symptôme concret est une lecture de page invalide qui se reproduit lors de requêtes ordinaires.

Notez précisément la requête et l’objet qui échouent. Ne laissez pas l’application continuer à effectuer des écritures à grande échelle alors que seule une partie de la base de données reste lisible, car tout nouvel état peut compliquer la récupération et les sauvegardes.

Rechercher les incohérences d’index, de transactions et de métadonnées

Les signes d’alerte comprennent des clés en double qui enfreignent un index unique, des lignes manquantes accessibles par un chemin d’accès mais pas par un autre, des identifiants de transaction invalides, des blocs TOAST ou de grandes valeurs endommagés, ainsi que des échecs de validation des index.

L’analyse de Credativ sur la corruption indique que les clusters sans sommes de contrôle des données peuvent révéler des dommages par des erreurs de bas niveau, telles que des pages invalides, des problèmes d’identifiants de transaction, des incohérences TOAST ou des plantages de processus serveur. Certaines sauvegardes par copie de fichiers peuvent conserver des pages corrompues sans les détecter.

Exécutez les contrôles d’intégrité et d’index pris en charge sur une copie ou pendant une fenêtre de maintenance contrôlée. La reconstruction des index peut réparer un index dérivé endommagé, mais elle ne répare ni les données de table corrompues ni le stockage sous-jacent.

Corréler les erreurs de la base de données aux avertissements du système de fichiers et du stockage

Examinez les journaux du noyau de l’hôte, du système de fichiers, du pool, du lecteur, du contrôleur, de l’onduleur et de l’environnement d’exécution des conteneurs autour de la panne. Recherchez des erreurs d’E/S, des réinitialisations, des erreurs de somme de contrôle, des remontages en lecture seule, des pools dégradés et des fichiers perdus ou tronqués.

Un guide de récupération de bases de données indique que les pannes de courant et une mémoire défectueuse peuvent entraîner des écritures de pages corrompues, surtout lorsque le comportement du stockage ne respecte pas les hypothèses de durabilité de la base de données. Ces incidents au niveau de l’hôte aident à distinguer la corruption de pages InnoDB d’un redémarrage normal de l’application.

Corrigez le chemin de stockage avant d’y restaurer une base de données saine. Une restauration logique réussie sur un support défaillant peut reproduire l’incident ou endommager silencieusement le support de remplacement.

Arrêtez les écritures et vérifiez que la récupération à partir d’une sauvegarde saine a réussi

Lorsque les signes de corruption se répètent, arrêtez les applications dépendantes, créez un instantané ou clonez le volume concerné si cela ne présente pas de risque, puis conservez les journaux et la configuration. Testez la sauvegarde la plus récente sur un stockage distinct avant de modifier le cluster d’origine.

La liste de contrôle ZimaSpace pour la sauvegarde de l’état des applications Docker définit ce qui doit être disponible avant toute tentative destructive de récupération de la base de données.

Le système n’est fiable que si la base de données restaurée démarre correctement, que les contrôles d’intégrité réussissent, que des requêtes et des écritures représentatives aboutissent, que les sauvegardes s’achèvent et que le stockage de l’hôte ne signale aucune nouvelle erreur. Les modes de récupération forcée doivent servir à récupérer les données dans le cadre d’un plan documenté, et non être utilisés en fonctionnement normal.

Assistance et conseils

À lire aussi

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.