Powrót do wszystkich studiów przypadków

DoradztwoOprogramowanie / platformy cyfrowe

Najpierw decyzja, co wysyłać, potem — za co płacić

Dostawca platformy SaaS B2B

Doradztwo w zakresie kontroli wolumenu pobieranej telemetrii i przydziału użytkowników, tak aby wydatki na obserwowalność odzwierciedlały wartość operacyjną.

Przegląd

Wolumen telemetrii pobieranej przez dostawcę SaaS rósł znacznie szybciej niż jego biznes, a za ten wzrost nikt wyraźnie nie odpowiadał. AceMQ pomogło przypisać wolumen do źródeł, usunąć to, z czego nic nie korzystało, i wprowadzić mechanizmy kontroli w warstwie zbierania danych, tak aby redukcja okazała się trwała.

Wyzwanie

W wolumenie dominowało kilka źródeł: rozwlekłe logi frameworków przekazywane na poziomie debug, niestandardowe zdarzenia emitowane przy każdym żądaniu, które zawsze były wyłącznie agregowane, oraz metryki infrastruktury zbierane w znacznie gęstszym interwale, niż prezentował jakikolwiek dashboard. Nikt nie widział, telemetria którego zespołu odpowiada za jaką część rachunku, więc rozmowy o kosztach do niczego nie prowadziły, a wzrost trwał kwartał po kwartale.

Środowisko

New Relic w wielokontowym środowisku AWS z obciążeniami na Kubernetes i kilkoma autonomicznymi zespołami produktowymi.

Podejście

AceMQ nie obsługuje platformy dostawcy — pomagamy klientom decydować o tym, co opuszcza ich infrastrukturę, i to kontrolować. W ramach projektu przypisujemy wolumen do zespołów i źródeł, sprawdzamy, co jest faktycznie odpytywane, oraz wdrażamy reguły odrzucania (drop rules) i próbkowanie w warstwie zbierania danych, gdzie działają niezależnie od tego, co emitują poszczególne aplikacje.

Rozwiązanie

  1. Przypisanie wolumenu do zespołów, usług i typów telemetrii, aby koszt miał właściciela, a nie był tylko sumą
  2. Zestawienie z wykorzystaniem zapytań i dashboardów w celu wskazania telemetrii, która jest pobierana, ale nigdy nie jest wykorzystywana
  3. Reguły odrzucania zastosowane w warstwie zbierania danych dla klas logów i zdarzeń, o których wykazano, że nikt z nich nie korzysta
  4. Korekta poziomów przekazywania logów u źródła i usunięcie wyjścia debug pozostawionego po dawnych incydentach
  5. Dopasowanie interwałów zbierania metryk infrastruktury do rozdzielczości faktycznie używanej przez dashboardy i alerty
  6. Budżety wolumenu dla poszczególnych zespołów wraz z monitoringiem, dzięki któremu zmiana w logowaniu ujawnia się jako alert, a nie jako faktura

Efekt

Pobierany wolumen spadł o mniej więcej czterdzieści procent, a żaden dashboard ani alert nie stracił źródła danych. Ponieważ wolumen jest teraz przypisany do zespołów i objęty budżetem, wzrost jest widoczną decyzją, a nie kwartalną niespodzianką.

Technologie

New RelicOpenTelemetryKubernetesTerraform

Potrzebują Państwo doradztwa w zakresie architektury New Relic?

Starsi inżynierowie New Relic w AceMQ realizowali już dokładnie taki rodzaj projektu. Niezależnie od tego, czy potrzebują Państwo doradztwa architektonicznego, praktycznego usunięcia problemów, czy stałego partnerstwa w modelu usług zarządzanych – jesteśmy gotowi pomóc.