Przegląd
Search heady Splunk w grupie finansowej były przeciążone: zaplanowane wyszukiwania regularnie były pomijane, a analitycy prowadzący dochodzenia stwierdzali, że ich wyszukiwania czekają w kolejce za zadaniami raportowymi. AceMQ zapewnia stałe wsparcie w strojeniu obciążenia wyszukiwań.
Wyzwanie
Przez lata utworzono setki zaplanowanych wyszukiwań, z których większość uruchamiała się co pięć minut w oknie dwudziestoczterogodzinnym niezależnie od potrzeb. Limity współbieżności były osiągane bez przerwy, więc harmonogram pomijał wyszukiwania — w tym kilka zasilających raportowanie zgodności, czego nikt nie zauważył, bo pominięte wyszukiwania domyślnie nie generują alertu. Wiele najcięższych wyszukiwań skanowało surowe zdarzenia tam, gdzie lepiej sprawdziłaby się akceleracja modelu danych lub indeks podsumowujący.
Środowisko
Klaster search headów Splunk on-premises obsługujący zespoły operacji bezpieczeństwa, raportowania zgodności i analityki biznesowej.
Podejście
Wsparcie polega tu na ciągłym strojeniu, a nie na jednorazowej poprawce, ponieważ obciążenie wyszukiwań z czasem znów rośnie. Śledzimy odsetek pominięć i koszt wyszukiwań według właścicieli, przepisujemy kosztowne wyszukiwania, rozkładamy harmonogram, aby nie wszystko uruchamiało się na tej samej granicy interwału, i rezerwujemy współbieżność, tak aby analityk badający incydent nigdy nie czekał w kolejce za raportem.
Rozwiązanie
- Wsparcie 24/7 z docelowymi czasami reakcji od 15 minut, zależnie od planu, i przypisanymi starszymi inżynierami, którzy znają środowisko wyszukiwań i jego właścicieli
- Alerty o pominiętych wyszukiwaniach skonfigurowane tak, aby luki w raportowaniu zgodności ujawniały się natychmiast, a nie po cichu
- Profilowanie kosztu wyszukiwań według właściciela i aplikacji, z rankingiem według zużycia zasobów, a nie liczby skarg
- Ciężkie wyszukiwania skanujące surowe dane przepisane na akcelerowane modele danych lub indeksy podsumowujące tam, gdzie pozwala na to struktura zapytania
- Okna harmonogramu i rozproszenie wyrażeń cron, dzięki którym wyszukiwania przestały skupiać się na tej samej granicy interwału
- Reguły zarządzania obciążeniem rezerwujące współbieżność dla dochodzeń ad hoc oddzielnie od zaplanowanego raportowania
Efekt
Odsetek pominiętych wyszukiwań spadł do znikomego poziomu, a luka w raportowaniu zgodności została zamknięta. Analitycy prowadzący dochodzenia otrzymują teraz natychmiastowe uruchomienie swoich wyszukiwań, zamiast czekać za zadaniami raportowymi.