Überblick
Das Unternehmen, der größte Pipelinebetreiber Nordamerikas, nutzt die RabbitMQ-Federation, um SCADA-Daten zwischen seinen Betriebsstandorten zu synchronisieren. Federation-Fehler führten zu gefährlichen Verzögerungen bei der Zustellung von Überwachungsdaten der Pipeline.
Herausforderung
Die Rebuild-Zeiten der RabbitMQ-Federation waren deutlich gestiegen, wobei eine sehr große Zahl von Topic-Exchange-Bindings zum Problem beitrug. Die Consumer müssen Daten innerhalb von 3 Minuten erhalten, um Alarme zu vermeiden, und innerhalb von 10 Minuten, um verpflichtende Abschaltungen zu verhindern. Im vergangenen Jahr hatte es mehrere Federation-Incidents gegeben, die die Pipeline-Sicherheit unmittelbar gefährdeten.
Umgebung
RabbitMQ 3.13.7 mit Federation, SCADA-Systeme im Unternehmensmaßstab, eine sehr große Zahl von Topic-Exchange-Bindings.
Vorgehen
AceMQ leistete eine Notfall-Sanierung mit einem Assessment von 2 bis 4 Tagen und anschließendem laufendem Support. Das Team analysierte die Federation-Architektur, die Optimierung der Bindings und alternative Ansätze, darunter RabbitMQ Streams zur Reduzierung der Bindings.
Lösung
- Die Ursachen der Federation-Fehler diagnostiziert, die auf eine übermäßige Zahl an Topic-Exchange-Bindings zurückgingen
- Architekturalternativen empfohlen, darunter RabbitMQ Streams zur Optimierung der Bindings
- Die Notfall-Sanierung abgegrenzt und eine sofortige Log-Analyse durchgeführt
- Eine langfristige Skalierungs-Roadmap für künftige Fusionen und Systemerweiterungen konzipiert
- Eine laufende Supportvereinbarung mit gestaffelten Reaktionszeiten eingerichtet
Resultat
Der Kunde erreichte eine zuverlässigere Federation und eine klare Roadmap für die Skalierung, sodass die Zustellung der Überwachungsdaten der Pipeline die sicherheitskritischen Zeitvorgaben erfüllt.