Comment empêcher un conteneur de base de données de grossir après le nettoyage des données

Eva Wong est la rédactrice technique et bricoleuse résidente chez ZimaSpace. Geek depuis toujours, passionnée par les laboratoires informatiques personnels et les logiciels open source, elle se spécialise dans la vulgarisation de concepts techniques complexes au moyen de guides pratiques et concrets. Eva pense que l’hébergement personnel doit être amusant, et non intimidant. À travers ses tutoriels, elle aide la communauté à démystifier les configurations matérielles, de la construction de leur premier NAS à la maîtrise des conteneurs Docker.

Un conteneur de base de données peut continuer à grossir après le nettoyage des données, car les lignes supprimées, les journaux de transactions, les index et les journaux du conteneur obéissent à des règles différentes de récupération de l’espace.

Ne supposez pas que le volume de la base de données grossit simplement parce que l’empreinte disque totale du conteneur augmente. Mesurez séparément le répertoire des données de la base, les répertoires WAL ou binlog, le fichier journal Docker, la couche inscriptible et les chemins de sauvegarde ou temporaires. Déterminez ensuite si l’espace libéré par la suppression de données est réutilisable en interne sans être rendu à l’hôte, si une réécriture est réellement nécessaire, ou si un fichier complètement différent continue de grossir.

Mesurez le chemin qui continue de grossir

Relevez la taille du volume nommé ou du répertoire de base de données monté depuis l’hôte, de la couche inscriptible du conteneur, du journal du conteneur sur l’hôte, du répertoire des journaux de transactions de la base de données, ainsi que de tout répertoire de sauvegarde ou temporaire, avant et après un cycle de nettoyage.

Un guide de diagnostic de l’espace disque PostgreSQL commence par le même principe : repérez où se trouve l’espace avant de choisir une opération de récupération.

Si seul le journal Docker grossit, le nettoyage de la base de données n’y changera rien. Si le fichier de données reste volumineux mais cesse de croître après le nettoyage, le moteur réutilise peut-être déjà les pages libérées, même si le système de fichiers de l’hôte ne constate aucune réduction.

Distinguer l’espace réutilisable dans la base de données de l’espace rendu au disque

De nombreuses bases de données transactionnelles ne suppriment pas immédiatement les blocs de fichier situés au milieu d’une table après la suppression de lignes. Elles marquent ou récupèrent des pages internes afin que les insertions suivantes puissent réutiliser cet espace, tandis que le fichier sous-jacent conserve la même taille.

PostgreSQL en donne un exemple clair : VACUUM ordinaire réutilise l’espace en interne, mais ne rend généralement pas au système d’exploitation les régions situées au milieu du fichier.

Vérifiez si le fichier continue de grossir lors de nouvelles insertions après le nettoyage. Une taille de fichier stable avec une fragmentation interne en baisse est différente d’une croissance incontrôlée et ne justifie généralement pas une réécriture d’urgence.

Utilisez la méthode de récupération d’espace du moteur de base de données, pas un nettoyage Docker générique

Pour rendre de la capacité à l’hôte, commencez par identifier le moteur et le format de stockage. PostgreSQL, MySQL ou MariaDB et SQLite ne disposent pas d’une commande de réduction interchangeable, et certaines opérations de récupération réécrivent de gros fichiers ou verrouillent des tables.

Un article sur le stockage MySQL explique comment OPTIMIZE peut reconstruire des tables InnoDB, au lieu de considérer qu’un DELETE garantit que l’hôte récupérera immédiatement de l’espace.

Sauvegardez la base de données et vérifiez l’espace libre avant toute opération nécessitant une réécriture importante. Un système de fichiers de serveur domestique presque plein est le pire moment pour lancer une commande qui nécessite une deuxième copie d’une grande table.

Vérifiez séparément la rétention des WAL, des binlogs et des données de réplication

Les journaux de transaction peuvent grossir même après la suppression des anciennes lignes de l’application. Une tâche d’archivage en échec, un emplacement de réplication obsolète, un réplica en retard, une transaction longue ou une exigence de conservation des sauvegardes peuvent maintenir d’anciens segments de journal sur le disque.

Une note récente sur la récupération PostgreSQL montre comment la rétention des WAL peut consommer de l’espace de stockage, indépendamment des données de table qu’un utilisateur vient de nettoyer.

Ne supprimez pas manuellement les fichiers WAL ou binlog du système de fichiers. Corrigez la cause de la rétention via le moteur de base de données, puis vérifiez que le recyclage normal reprend.

Limitez les journaux Docker et vérifiez la couche inscriptible

Un conteneur de base de données peut sembler grossir parce que stdout ou stderr est capturé dans un journal Docker sans limite, ou parce qu’un export temporaire, un cache ou un fichier de base de données a été écrit dans la couche du conteneur au lieu du volume persistant prévu.

Un cas de journalisation auto-hébergée avec Docker signale que les journaux des conteneurs peuvent grossir indéfiniment si la rotation n’est pas configurée.

Associez chaque fichier volumineux de l’hôte au chemin correspondant dans son conteneur avant toute suppression. Configurez la rotation des journaux pour limiter leur croissance future et placez les données de la base dans un volume explicite au lieu de vous fier à la couche inscriptible éphémère.

Vérifiez que le nettoyage crée une marge durable

Après l’étape de récupération d’espace choisie, exécutez la charge de travail d’écriture habituelle pendant une période représentative et comparez l’espace libre sur l’hôte, la taille du fichier de la base de données, celle du journal des transactions, les journaux Docker ainsi que les métriques internes d’espace libre ou de fragmentation.

Un guide sur la réduction de l’espace de stockage PostgreSQL souligne que le rétrécissement nécessite une maintenance ciblée, plutôt que de supposer que chaque suppression doit immédiatement réduire la taille du fichier sur le système d’exploitation.

Le problème est résolu lorsque la croissance prévue de la base de données est réutilisée ou limitée et que l’hôte ne perd plus de capacité inexpliquée après chaque cycle de nettoyage. Le guide ZimaSpace associé sur les sauvegardes cohérentes des conteneurs de base de données définit le point de restauration avant toute opération qui réécrit les fichiers de la base de données.

Foire aux questions

Pourquoi la suppression de millions de lignes libère-t-elle parfois si peu d’espace disque sur l’hôte ?

Le moteur peut marquer ces pages comme réutilisables dans le fichier de la base de données, sans tronquer le fichier lui-même. Cela peut empêcher sa croissance future sans modifier sa taille visible sur l’hôte.

Dois-je effectuer une réécriture complète chaque fois que le conteneur devient volumineux ?

Non. Les opérations qui réécrivent beaucoup de données peuvent nécessiter des verrous, de l’espace temporaire et des E/S importantes. N’y recourez que s’il est nécessaire de libérer de l’espace sur l’hôte et que vous comprenez les risques propres au moteur.

Docker prune peut-il récupérer l’espace occupé par un volume de base de données ?

Pas en toute sécurité si le volume fait encore partie de l’état persistant de la base de données. Déterminez si l’espace est utilisé par les journaux, les images, les conteneurs arrêtés ou les données actives de la base avant de lancer un nettoyage.

Assistance et conseils

À lire aussi

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.