Przegląd
Firma rozwija jedną z wiodących na świecie zunifikowanych platform zabezpieczeń fizycznych. Jej klastry RabbitMQ działające na Windows doświadczały opóźnień wyboru lidera, które powodowały wielogodzinne przestoje.
Wyzwanie
Znany błąd RabbitMQ powodował przy dużym obciążeniu opóźnienia wyboru lidera sięgające kilku godzin, co oznaczało poważne przestoje w działaniu platformy zabezpieczeń. Wdrożenie oparte na Windows zwiększało złożoność operacyjną, a klient musiał zaplanować migrację na Linux przy zachowaniu stabilności w ściśle kontrolowanym środowisku wdrożeniowym.
Środowisko
Wdrożenie RabbitMQ na Windows, ograniczenia środowiska narzucone przez klienta, klaster za load balancerem z przełączaniem awaryjnym opartym na DNS.
Podejście
AceMQ zapewniło ukierunkowane godziny doradcze obejmujące aktualizację wersji, konfigurację load balancera, szkolenie z rozwiązywania problemów i planowanie migracji na Linux. W ramach współpracy powstał powtarzalny playbook restartów RabbitMQ oraz procedury rozwiązywania problemów.
Rozwiązanie
- Wskazanie konkretnej poprawki wersji RabbitMQ usuwającej błąd wyboru lidera
- Zaprojektowanie strategii testów w środowisku stagingowym przed wdrożeniem produkcyjnym
- Konfiguracja load balancera opartego na DNS w celu poprawy stabilności klientów
- Opracowanie powtarzalnego playbooka restartów RabbitMQ dla personelu wsparcia
- Przygotowanie programu szkoleń z rozwiązywania problemów dla wewnętrznych zespołów wsparcia
- Zaplanowanie ścieżki migracji z Windows na Linux z analizą możliwości Kubernetes
Efekt
Klient rozwiązał krytyczny problem z wyborem lidera, zyskał wewnętrzne kompetencje w zakresie rozwiązywania problemów i ma jasną ścieżkę migracji z Windows na Linux, która poprawi efektywność operacyjną.