Powrót do wszystkich studiów przypadków

Ocena środowiskaAdministracja publiczna / obronność

Przełączanie awaryjne było ręcznym runbookiem, którego nikt nie przećwiczył, a komunikatów nie dało się odtworzyć

Integrator systemów dla administracji publicznej

Środowisko integracyjne Boomi zależało od RabbitMQ bez automatycznego przełączania awaryjnego i bez możliwości ponownego odtworzenia komunikatów po awarii. AceMQ zaprojektowało model disaster recovery i ścieżkę odtwarzania komunikatów, w obu przypadkach z uwzględnieniem wymogów audytowych.

Health Check RabbitMQ

Przegląd

Procesy Boomi przesyłały regulowane transakcje między systemami, a RabbitMQ służył jako warstwa transportowa między nimi. Odtworzenie działania po zdarzeniu w centrum danych oznaczało ręczną promocję, której nikt nie ćwiczył, a gdy komunikat został skonsumowany, nie było sposobu, by go ponownie odtworzyć.

Wyzwanie

Dwie luki wzajemnie się potęgowały. Przełączanie awaryjne zależało od człowieka wykonującego nieprzećwiczoną procedurę, a ponieważ kolejki usuwają komunikaty po ich skonsumowaniu, nie istniał akceptowalny z punktu widzenia audytu sposób odtworzenia tego, co przepłynęło w trakcie incydentu. Oba problemy trzeba było rozwiązać bez naruszania mechanizmów kontrolnych, według których środowisko jest audytowane.

Środowisko

Procesy integracyjne Boomi działające na RabbitMQ na platformie kontenerowej, obejmujące podstawowe i zapasowe (DR) centrum danych.

Podejście

AceMQ przygotowało projekt disaster recovery obejmujący przełączanie ręczne i automatyczne, łącznie z tym, co komercyjna dystrybucja RabbitMQ zmienia w opcji automatycznej. Równolegle oceniliśmy konwersję wybranych kolejek na strumienie (streams), tak aby komunikaty pozostawały możliwe do odtworzenia po skonsumowaniu, i określiliśmy warstwę buforującą, dzięki której procesy Boomi przy niedostępności brokera działają w trybie ograniczonym, zamiast kończyć się błędem.

Rozwiązanie

  1. Projekt disaster recovery porównujący ręczną promocję z automatycznym przełączaniem awaryjnym
  2. Wymiarowanie klastrów w podstawowym i zapasowym centrum danych
  3. Ocena konwersji kolejek na strumienie, aby komunikaty pozostawały możliwe do odtworzenia po skonsumowaniu
  4. Przegląd mechanizmu odtwarzania pod kątem wymogów audytowych i zasad retencji obowiązujących w środowisku
  5. Warstwa buforująca, dzięki której procesy integracyjne w trakcie awarii działają w trybie ograniczonym, zamiast kończyć się błędem
  6. Runbook operacyjny i szkolenie dla zespołów wsparcia i deweloperskich

Efekt

Środowisko integracyjne zyskało przećwiczoną procedurę odtwarzania, możliwą do obrony odpowiedź na pytanie, co działo się w trakcie awarii, oraz runbook, który własni inżynierowie klienta mogą wykonać bez czekania na dostawcę.

Technologie

BoomiRabbitMQKubernetes

Czas na przegląd Health Check Boomi?

Starsi inżynierowie Boomi w AceMQ realizowali już dokładnie taki rodzaj projektu. Niezależnie od tego, czy potrzebują Państwo doradztwa architektonicznego, praktycznego usunięcia problemów, czy stałego partnerstwa w modelu usług zarządzanych – jesteśmy gotowi pomóc.