Panoramica
Un fornitore di analytics in ambito sanitario usava una singola istanza Redis che conteneva sia le voci di cache sia lo stato delle sessioni utente. Quando la memoria andava sotto pressione, la policy di eviction rimuoveva le chiavi senza distinguere quelle sacrificabili, e gli utenti venivano disconnessi nel mezzo del lavoro. AceMQ ha preso in carico il supporto Redis con ingegneri senior dedicati.
Sfida
Mescolare dati di cache e di sessione in un unico keyspace con una sola policy di eviction significa che ogni scelta di policy è sbagliata per uno dei due workload. A peggiorare la situazione, molte chiavi di cache non avevano alcun TTL, per cui una policy di eviction volatile non aveva nulla di idoneo da rimuovere e l'istanza restituiva invece errori di out-of-memory. Anche i dati sulla memoria venivano interpretati male, scambiando la frammentazione per crescita dei dati.
Ambiente
Redis su Azure a supporto dello stato delle sessioni e del caching dei risultati delle query per un'applicazione di analytics clinica.
Approccio
AceMQ ha prima separato i workload, perché nessuna policy di eviction può servirli entrambi, poi ha corretto la configurazione dei TTL e delle policy per ciascuno. I report sulla memoria sono stati chiariti in modo che il team operativo potesse distinguere crescita dei dati, frammentazione e uso dei buffer di replica.
Soluzione
- Separati stato delle sessioni e cache in istanze distinte, con policy adatte a ciascun workload
- Applicati TTL in modo coerente a tutte le chiavi di cache, così che le policy di eviction volatile abbiano candidati idonei
- Impostati maxmemory e policy di eviction per istanza in base al working set misurato, non alla memoria dell'host
- Chiariti i report sulla memoria, in modo che frammentazione, dati e buffer di replica vengano letti correttamente
- Individuati e corretti i pattern di chiavi che causavano una crescita illimitata del keyspace di cache
- Attivata l'escalation 24/7 verso ingegneri Redis senior, con obiettivi di risposta da 15 minuti, in base al piano
Esito
La perdita di sessioni sotto pressione di memoria si è fermata del tutto, e gli errori di out-of-memory sono stati eliminati non appena l'eviction ha avuto candidati idonei. Il team del cliente ora legge correttamente le metriche di memoria e interviene sulla crescita prima che diventi un incidente.