Zurück zu allen Kundenbeispielen

SupportFinanzdienstleistungen / Handel

Parallelität bei Suchen, die Platz lässt für den Analysten, der sofort Ergebnisse braucht

Finanzdienstleistungsgruppe

Laufender Support für eine Splunk-Umgebung, in der geplante Suchen übersprungen wurden, Ad-hoc-Suchen in der Warteschlange hingen und Analysten der Plattform die Schuld gaben.

Überblick

Die Splunk-Search-Heads einer Finanzdienstleistungsgruppe waren ausgelastet: Geplante Suchen wurden regelmäßig übersprungen, und Analysten fanden ihre Suchen während laufender Untersuchungen hinter Reporting-Jobs eingereiht. AceMQ unterstützt das Unternehmen laufend beim Tuning der Suchlast.

Herausforderung

Über die Jahre waren Hunderte geplanter Suchen entstanden, die meisten so eingestellt, dass sie unabhängig vom Bedarf alle fünf Minuten über ein Fenster von vierundzwanzig Stunden liefen. Die Parallelitätslimits waren ständig erreicht, daher übersprang der Scheduler Suchen – darunter mehrere, die ins Compliance-Reporting einflossen. Das fiel nicht auf, weil übersprungene Suchen standardmäßig keinen Alarm auslösen. Viele der schwersten Suchen scannten rohe Events, wo eine Data Model Acceleration oder ein Summary Index besser geeignet gewesen wäre.

Umgebung

On-Premises-Search-Head-Cluster von Splunk für Security Operations, Compliance-Reporting und Business-Analytics-Teams.

Vorgehen

Support bedeutet hier kontinuierliches Tuning statt einer einmaligen Korrektur, denn die Suchlast wächst nach. Wir verfolgen Skip-Raten und Suchkosten pro Owner, schreiben die teuren Suchen um, verteilen den Zeitplan so, dass nicht alles zur selben Intervallgrenze startet, und reservieren Parallelität, damit ein Analyst, der einen Incident untersucht, nie hinter einem Bericht warten muss.

Lösung

  1. 24/7-Support mit Reaktionszeitzielen ab 15 Minuten, je nach Plan, und namentlich zugeordneten Senior Engineers, die den Suchbestand und seine Owner kennen
  2. Alerting für übersprungene Suchen konfiguriert, damit Lücken im Compliance-Reporting sofort sichtbar werden statt unbemerkt zu bleiben
  3. Profiling der Suchkosten nach Owner und App, mit einer Rangfolge nach Ressourcenverbrauch statt nach Zahl der Beschwerden
  4. Schwere Suchen über rohe Events auf beschleunigte Data Models oder Summary Indexes umgeschrieben, wo die Abfrageform es zulässt
  5. Zeitfenster und gestaffelte Cron-Zeitpläne eingeführt, damit sich Suchen nicht mehr an derselben Intervallgrenze ballen
  6. Workload-Management-Regeln, die Parallelität für Ad-hoc-Untersuchungen getrennt vom geplanten Reporting reservieren

Resultat

Die Zahl übersprungener Suchen sank auf ein vernachlässigbares Maß, und die Lücke im Compliance-Reporting ist geschlossen. Analysten erhalten ihre Suchen bei Untersuchungen jetzt sofort eingeplant, statt hinter Reporting-Jobs zu warten.

Technologien

SplunkLinuxSyslog

Brauchen Sie Expertensupport für Splunk?

Die Senior Engineers von AceMQ für Splunk haben genau diese Art von Projekt bereits umgesetzt. Ob Sie Architekturberatung, praktische Fehlerbehebung oder eine dauerhafte Managed-Services-Partnerschaft benötigen – wir sind bereit, Ihnen zu helfen.