Powrót do wszystkich studiów przypadków

Wsparcie techniczneOchrona zdrowia / świadczenia

Wsparcie Redis 24/7 od starszych inżynierów, bez pierwszej linii (tier 1)

Dostawca analityki medycznej

Stałe wsparcie dla instancji, w których polityka eviction nie odpowiadała sposobowi wykorzystania przestrzeni kluczy, przez co pod presją pamięciową usuwane były dane sesji.

Przegląd

Dostawca analityki medycznej korzystał z jednej instancji Redis przechowującej zarówno wpisy cache, jak i stan sesji użytkowników. Gdy pojawiała się presja pamięciowa, polityka eviction usuwała klucze bez względu na to, które z nich były zbędne, przez co użytkownicy byli wylogowywani w trakcie pracy. AceMQ przejęło wsparcie techniczne Redis, przydzielając do niego konkretnych starszych inżynierów.

Wyzwanie

Łączenie danych cache i danych sesji w jednej przestrzeni kluczy z jedną polityką eviction oznacza, że każdy wybór polityki jest błędny dla jednego z obciążeń. Dodatkowo wiele kluczy cache nie miało w ogóle TTL, więc polityka typu volatile nie miała czego usuwać, a instancja zwracała zamiast tego błędy braku pamięci (out-of-memory). Raporty dotyczące pamięci były też błędnie interpretowane — fragmentację brano za przyrost danych.

Środowisko

Redis w Azure obsługujący stan sesji i cache wyników zapytań dla aplikacji do analityki klinicznej.

Podejście

AceMQ najpierw rozdzieliło obciążenia, ponieważ żadna pojedyncza polityka eviction nie obsłuży obu, a następnie poprawiło konfigurację TTL i polityk dla każdego z nich. Raportowanie pamięci uporządkowano tak, aby zespół operacyjny mógł odróżnić przyrost danych, fragmentację i wykorzystanie buforów replikacji.

Rozwiązanie

  1. Rozdzielenie stanu sesji i cache na osobne instancje z politykami dopasowanymi do każdego obciążenia
  2. Konsekwentne ustawienie TTL dla kluczy cache, aby polityki typu volatile miały klucze kwalifikujące się do usunięcia
  3. Ustawienie maxmemory i polityki eviction dla każdej instancji na podstawie zmierzonego zbioru roboczego, a nie pamięci hosta
  4. Uporządkowanie raportowania pamięci, aby fragmentacja, dane i bufory replikacji były poprawnie interpretowane
  5. Identyfikacja i usunięcie wzorców kluczy powodujących nieograniczony przyrost przestrzeni kluczy cache
  6. Wprowadzenie eskalacji 24/7 do starszych inżynierów Redis z docelowymi czasami reakcji od 15 minut, zależnie od planu

Efekt

Utrata sesji pod presją pamięciową całkowicie ustała, a błędy braku pamięci zniknęły, gdy polityka eviction zyskała klucze kwalifikujące się do usunięcia. Zespół klienta poprawnie interpretuje teraz metryki pamięci i reaguje na przyrost, zanim stanie się on incydentem.

Technologie

RedisKubernetesPrometheusTerraform

Potrzebują Państwo eksperckiego wsparcia Redis?

Starsi inżynierowie Redis w AceMQ realizowali już dokładnie taki rodzaj projektu. Niezależnie od tego, czy potrzebują Państwo doradztwa architektonicznego, praktycznego usunięcia problemów, czy stałego partnerstwa w modelu usług zarządzanych – jesteśmy gotowi pomóc.