Przegląd
Firma, największy operator rurociągów w Ameryce Północnej, wykorzystuje federację RabbitMQ do synchronizacji danych SCADA między lokalizacjami operacyjnymi. Awarie federacji powodowały niebezpieczne opóźnienia w dostarczaniu danych z monitorowania rurociągów.
Wyzwanie
Czas odbudowy federacji RabbitMQ znacząco się wydłużył, a do problemu przyczyniała się bardzo duża liczba powiązań (bindings) z exchange'ami typu topic. Konsumenci muszą otrzymać dane w ciągu 3 minut, aby nie wywołać alarmów, i w ciągu 10 minut, aby uniknąć obowiązkowych wyłączeń. W ciągu ostatniego roku doszło do kilku incydentów federacji, które bezpośrednio zagrażały bezpieczeństwu rurociągów.
Środowisko
RabbitMQ 3.13.7 z federacją, korporacyjne systemy SCADA, bardzo duża liczba powiązań z exchange'ami typu topic.
Podejście
AceMQ przeprowadziło awaryjną naprawę obejmującą 2–4-dniową ocenę, po której nastąpiło stałe wsparcie. Zespół przeanalizował architekturę federacji, optymalizację powiązań i alternatywne podejścia, w tym strumienie RabbitMQ (streams) w celu ograniczenia liczby powiązań.
Rozwiązanie
- Zdiagnozowanie pierwotnych przyczyn awarii federacji związanych z nadmierną liczbą powiązań z exchange'ami typu topic
- Rekomendacja alternatyw architektonicznych, w tym strumieni RabbitMQ, w celu optymalizacji powiązań
- Określenie zakresu awaryjnej naprawy i natychmiastowa analiza logów
- Zaprojektowanie długoterminowej mapy drogowej skalowalności na potrzeby przyszłych fuzji i rozbudowy systemów
- Zawarcie umowy o stałe wsparcie z wielopoziomowymi czasami reakcji
Efekt
Klient uzyskał wyższą niezawodność federacji i jasną mapę drogową skalowalności, dzięki czemu dostarczanie danych z monitorowania rurociągów spełnia krytyczne dla bezpieczeństwa wymagania czasowe.