Torna a tutti i casi d'uso

AssessmentPubblica amministrazione / Difesa

Stabilire cosa è davvero recuperabile e cosa no

Ente della pubblica amministrazione

Valutazione della configurazione della persistenza, della topologia di replica e del comportamento in failover rispetto alla durabilità effettivamente richiesta dai carichi di lavoro.

Panoramica

Un ente della pubblica amministrazione utilizzava Redis per diversi carichi di lavoro con esigenze di durabilità differenti, ma con un'unica configurazione ereditata. Nessuno era in grado di dire quali dati sopravvivessero al guasto di un host e quali no. AceMQ ha valutato il deployment rispetto ai requisiti reali di ciascun carico di lavoro.

Sfida

Le opzioni di persistenza di Redis bilanciano durabilità e latenza in modi facili da configurare male e difficili da notare finché non si verifica un guasto. Le istanze dell'ente usavano intervalli di snapshot che avrebbero fatto perdere minuti di scritture, mentre alcuni carichi di lavoro erano considerati durevoli. Replica e failover non erano mai stati testati, quindi il comportamento della promozione e la perdita di dati in caso di failover erano sconosciuti.

Ambiente

Istanze Redis on-premise con failover gestito da Sentinel, a supporto di carichi di caching, code e sessioni.

Approccio

AceMQ ha classificato ogni carico di lavoro in base alla perdita di dati effettivamente tollerabile e l'ha confrontata con ciò che la configurazione attuale garantiva. Il failover è stato provocato deliberatamente, misurando la perdita di dati anziché stimarla, così il divario tra ipotesi e comportamento reale è stato documentato con evidenze.

Soluzione

  1. Classificazione di ogni carico di lavoro per perdita di dati tollerabile e confronto con ciò che la configurazione garantisce davvero
  2. Revisione degli intervalli di snapshot e della policy di fsync dell'append-only file per ogni istanza rispetto a quei requisiti
  3. Failover Sentinel provocato deliberatamente, con misurazione della perdita di dati effettiva e del tempo di promozione
  4. Valutazione della topologia di replica, della configurazione del quorum e dell'esposizione allo split-brain
  5. Verifica delle procedure di ripristino dagli artefatti di persistenza esistenti con test di recovery cronometrati
  6. Consegna di una matrice di durabilità per carico di lavoro con le modifiche di configurazione necessarie a colmare ogni lacuna

Esito

L'ente ha ottenuto una descrizione documentata e supportata da evidenze di ciò a cui sopravvive ciascun carico di lavoro, al posto di un'ipotesi mai verificata. Due carichi di lavoro ritenuti durevoli si sono rivelati non esserlo, e sono stati riconfigurati prima che un guasto lo dimostrasse.

Tecnologie

RedisRedis SentinelLinuxPrometheus

Pronti per un health check di Redis?

Gli ingegneri Redis senior di AceMQ hanno già gestito proprio questo tipo di progetto. Che vi servano indicazioni architetturali, remediation operativa o una partnership gestita continuativa, siamo pronti ad aiutarvi.