Présentation
Un distributeur d'énergie exploitait quatre clusters Tanzu Postgres dédiés au comptage et à la facturation, sur une version de l'opérateur qui ne prenait plus en charge la version de PostgreSQL vers laquelle il devait migrer. La mise à niveau avait été reportée deux fois, faute de savoir dans quel ordre faire évoluer chaque composant.
Défi
L'opérateur et le moteur de base de données ont chacun leur propre plage de compatibilité : l'opérateur devait donc évoluer en premier, par étapes, avant de pouvoir changer de version majeure de PostgreSQL. Chaque étape touchait des services de données de production soumis à de fortes exigences de disponibilité, et l'équipe ne disposait d'aucun retour arrière testé en cas de problème.
Environnement
Quatre clusters Tanzu Postgres sur une plateforme Kubernetes autogérée, chacun avec deux réplicas, provisionnés et configurés via Terraform.
Approche
AceMQ a d'abord cartographié le chemin de compatibilité, puis répété chaque étape sur des clones des données de production restaurés dans un namespace distinct. La mise à niveau de version majeure a utilisé pg_upgrade en commençant par les réplicas, la réplication logique étant gardée en solution de repli pour le plus grand cluster.
Solution
- Cartographie des combinaisons prises en charge entre opérateur et PostgreSQL, et documentation de l'ordre de chaque étape
- Restauration de clones des quatre clusters et répétition de la mise à niveau de l'opérateur, puis de la mise à niveau de version majeure, en chronométrant chacune
- Exécution de pg_upgrade en mode link d'abord sur un réplica, puis vérification des extensions et ANALYZE après la migration
- Préparation d'une voie de réplication logique pour le plus grand cluster, au cas où la fenêtre d'interruption se révélerait trop courte
- Définition d'un point de retour arrière à chaque étape, adossé à une sauvegarde récente déjà restaurée une fois
- Mise à jour des modules Terraform afin que les versions mises à niveau constituent l'état déclaré
Résultat obtenu
Les quatre clusters sont passés au nouvel opérateur et à la nouvelle version majeure de PostgreSQL dans les fenêtres prévues, les durées mesurées lors des répétitions se confirmant en production. Le client dispose d'un chemin de mise à niveau documenté pour la prochaine version de l'opérateur.