Torna a tutti i casi d'uso

AssessmentPubblica amministrazione / Difesa

Un quadro chiaro di margini, rischi e di cosa cede per primo

Ente della pubblica amministrazione

Assessment di topologia, configurazione di replica e consistenza, comportamento della JVM e della garbage collection, salute delle compaction e margine di crescita.

Panoramica

Un ente della pubblica amministrazione gestiva un cluster Cassandra ereditato da un incarico con un fornitore concluso anni prima. La documentazione era scarsa e al team operativo non era mai stata fornita una baseline. AceMQ ha valutato il cluster rispetto al carico di lavoro attuale e alla crescita prevista.

Sfida

Valutare un cluster ereditato significa distinguere le scelte di progettazione deliberate da quelle accumulate per caso. Fattore di replica e livelli di consistenza andavano verificati rispetto alla durabilità realmente richiesta dall'ente, la distribuzione dei token andava controllata alla ricerca di hot spot, e il comportamento della JVM e della garbage collection andava misurato sotto carico reale anziché dedotto dalle impostazioni.

Ambiente

Cluster Apache Cassandra on-premise a supporto di carichi di lavoro di gestione delle pratiche e conservazione documentale.

Approccio

AceMQ ha raccolto evidenze dal cluster in esercizio (ownership dei token, distribuzione del carico per nodo, distribuzione delle pause di garbage collection, backlog delle compaction e code dei task in sospeso) e le ha valutate rispetto ai requisiti di durabilità e disponibilità dell'ente. I rilievi sono stati ordinati in base a quanto ciascuno fosse vicino a causare un incidente.

Soluzione

  1. Verifica dell'ownership dei token e della distribuzione del carico per nodo per individuare hot spot e nodi sbilanciati
  2. Revisione del fattore di replica e dei livelli di consistenza rispetto ai requisiti reali di durabilità dell'ente
  3. Misurazione della distribuzione delle pause di garbage collection e del comportamento dell'heap sotto il carico di produzione
  4. Valutazione del backlog delle compaction, dei task in sospeso e del numero di SSTable per tabella per individuare il debito accumulato
  5. Valutazione della copertura delle repair e dello storico del loro completamento rispetto a gc_grace_seconds
  6. Proiezione del margine di capacità rispetto alla crescita e consegna di una roadmap di interventi ordinata per rischio

Esito

L'ente ha ottenuto una baseline che non aveva mai avuto, con gli elementi più vicini a causare un disservizio individuati e messi in sequenza. Di conseguenza sono state corrette diverse scelte di configurazione ereditate, tra cui livelli di consistenza che non corrispondevano al requisito di durabilità dichiarato.

Tecnologie

Apache CassandraLinuxPrometheusKubernetes

Pronti per un health check di Apache Cassandra?

Gli ingegneri Apache Cassandra senior di AceMQ hanno già gestito proprio questo tipo di progetto. Che vi servano indicazioni architetturali, remediation operativa o una partnership gestita continuativa, siamo pronti ad aiutarvi.