Volver a todos los casos de uso

EvaluaciónGobierno / Defensa

Determinar qué es realmente recuperable y qué no

Organismo del sector público

Evaluación de la configuración de persistencia, la topología de replicación y el comportamiento de failover frente a la durabilidad que las cargas de trabajo realmente requieren.

Descripción general

Un organismo del sector público ejecutaba Redis para varias cargas de trabajo con distintas necesidades de durabilidad, pero con una única configuración heredada. Nadie podía decir qué datos sobrevivían a la falla de un host y cuáles no. AceMQ evaluó el despliegue frente a los requisitos reales de cada carga de trabajo.

Desafío

Las opciones de persistencia de Redis equilibran durabilidad y latencia de maneras fáciles de configurar mal y difíciles de detectar hasta que ocurre una falla. Las instancias del organismo usaban intervalos de snapshot que perderían minutos de escrituras, mientras que se suponía que algunas cargas de trabajo eran durables. La replicación y el failover nunca se habían probado, así que se desconocía cómo se comportaba la promoción y cuántos datos se perdían en un failover.

Entorno

Instancias de Redis on-premises con failover administrado por Sentinel, que dan servicio a cargas de trabajo de caché, colas y sesiones.

Enfoque

AceMQ clasificó cada carga de trabajo según la pérdida que realmente podía tolerar y luego la comparó con lo que garantizaba la configuración actual. El failover se ejercitó de forma deliberada, midiendo la pérdida de datos en lugar de estimarla, para que la brecha entre lo supuesto y el comportamiento real quedara documentada con evidencia.

Solución

  1. Clasificación de cada carga de trabajo según la pérdida de datos tolerable y comparación con lo que la configuración realmente garantiza
  2. Revisión de los intervalos de snapshot y de la política de fsync del archivo append-only en cada instancia frente a esos requisitos
  3. Ejercicio deliberado del failover de Sentinel y medición de la pérdida de datos real y del tiempo de promoción
  4. Evaluación de la topología de replicación, la configuración de quórum y la exposición a split-brain
  5. Verificación de los procedimientos de restauración a partir de los artefactos de persistencia existentes, con pruebas de recuperación cronometradas
  6. Entrega de una matriz de durabilidad por carga de trabajo con los cambios de configuración necesarios para cerrar cada brecha

Resultado final

El organismo recibió una declaración documentada y respaldada con evidencia de lo que sobrevive cada carga de trabajo, en reemplazo de un supuesto que nunca se había probado. Dos cargas de trabajo que se creían durables resultaron no serlo y se reconfiguraron antes de que una falla lo demostrara.

Tecnologías

RedisRedis SentinelLinuxPrometheus

¿Listo para un health check de Redis?

Los ingenieros sénior de Redis de AceMQ ya han realizado este mismo tipo de proyecto. Ya sea que necesite orientación de arquitectura, remediación práctica o una alianza continua de servicios administrados, estamos listos para ayudarlo.