Überblick
Ein Streaming-Anbieter hatte über verschiedene Teams hinweg Dutzende MySQL-Instanzen angesammelt, ohne einheitlichen Standard für Replikation, Backup oder Konfiguration. Niemand konnte mit Sicherheit sagen, welche Datenbanken sich wiederherstellen ließen und wie schnell. AceMQ wurde beauftragt, das tatsächliche Bild zu ermitteln.
Herausforderung
Das organische Wachstum hatte zu erheblicher Konfigurationsdrift geführt: Instanzen mit unterschiedlichen Binary-Log-Einstellungen, Replicas ohne GTIDs und Backup-Jobs, die Erfolg meldeten, während sie Artefakte erzeugten, die nie jemand wiederhergestellt hatte. Für das Assessment mussten Aussagen überprüft statt nur gesammelt werden.
Umgebung
MySQL-Landschaft auf AWS über mehrere Teams und Account-Grenzen hinweg, als Basis für Content-Katalog- und Berechtigungsservices.
Vorgehen
AceMQ inventarisierte jede Instanz mit ihrer tatsächlichen Laufzeitkonfiguration statt der beabsichtigten und testete anschließend die entscheidenden Teile. Backups wurden wiederhergestellt und dabei die Zeit gemessen. Failover-Pfade wurden nachverfolgt, um zu sehen, ob sie an einem sinnvollen Ziel endeten.
Lösung
- Vollständiges Inventar der Instanzen erstellt, mit Laufzeitkonfiguration direkt von den Servern erfasst
- Konfigurationsdrift bei Binary Logging, GTID-Modus, Durability-Einstellungen und Zeichensätzen identifiziert
- Zeitgemessene Test-Restores aus vorhandenen Backups durchgeführt, um reale Wiederherstellungszeiten zu ermitteln und unbrauchbare Artefakte aufzudecken
- Replikationstopologie und Failover-Pfade nachverfolgt, um Replicas zu finden, die sich tatsächlich nicht promoten ließen
- Connection Routing und Proxy-Konfiguration auf Single Points of Failure geprüft
- Standard-Baseline sowie einen priorisierten Plan geliefert, um abweichende Instanzen wieder in Einklang zu bringen
Resultat
Der Anbieter verfügt heute über ein genaues Inventar mit Wiederherstellungszeiten, die auf echten Restores statt auf dem Status der Backup-Jobs beruhen. Mehrere Backup-Sets, die Erfolg gemeldet hatten, erwiesen sich als nicht wiederherstellbar – das wurde korrigiert, bevor sie gebraucht wurden.