Przegląd
Wdrożenia WSO2 często wymiaruje się na podstawie architektury referencyjnej wybranej przy instalacji i nigdy później do tego nie wraca. Wzorce ruchu się zmieniają, dochodzą nowi najemcy, a rozbieżność między wdrożoną topologią a obciążeniem objawia się niestabilnością, a nie wyraźnym sygnałem braku pojemności.
Wyzwanie
Płaszczyzna sterowania i brama działały na wspólnych węzłach, bazy danych wszystkich komponentów znajdowały się w jednej instancji bez rozdzielenia, a deklarowanej wysokiej dostępności nigdy nie przetestowano. Ruch znacznie wzrósł i przesunął się w stronę długotrwałych połączeń strumieniowych, których pierwotne wymiarowanie nie przewidywało.
Środowisko
WSO2 API Manager na Kubernetes ze wspólną warstwą baz danych, obsługujący API śledzenia przesyłek i integracji z partnerami.
Podejście
AceMQ sprofilowało rzeczywiste cechy ruchu — czas trwania połączeń, rozmiar ładunków, kształt skoków — i porównało je z wdrożoną topologią i przydziałem zasobów. Następnie sprawdziliśmy deklaracje dotyczące wysokiej dostępności, celowo wywołując awarie komponentów, zamiast przyjmować diagram architektury za pewnik.
Rozwiązanie
- Profilowanie rzeczywistego kształtu ruchu, w tym czasu trwania połączeń, rozmiaru ładunków i charakterystyki skoków
- Rozdzielenie obciążeń płaszczyzny sterowania i bramy na pule węzłów o odpowiednim rozmiarze
- Rekomendacja rozdzielenia i doboru rozmiaru baz danych dla każdego komponentu na podstawie zmierzonego obciążenia zapytaniami
- Testy awaryjne konfiguracji wysokiej dostępności polegające na celowym wyłączaniu każdej warstwy komponentów
- Przegląd przepływu zdarzeń opartego na Kafce między bramą a menedżerem ruchu pod kątem zapasu pojemności
- Przekazanie modelu wymiarowania powiązanego ze zmierzonym ruchem, a nie z pierwotną architekturą referencyjną
Efekt
Testy awaryjne ujawniły dwa pojedyncze punkty awarii, których diagram architektury nie pokazywał; oba zostały usunięte. Decyzje o wymiarowaniu opierają się teraz na zmierzonym modelu zamiast na pierwotnych założeniach z czasu instalacji.