Voltar a todos os casos de utilização

AvaliaçãoAdministração pública / Defesa

Apurar o que é de facto recuperável e o que não é

Organismo do setor público

Avaliação da configuração de persistência, da topologia de replicação e do comportamento de failover face à durabilidade de que as cargas de trabalho realmente precisam.

Visão geral

Um organismo do setor público usava Redis em várias cargas de trabalho com necessidades de durabilidade diferentes, mas com uma única configuração herdada. Ninguém sabia dizer que dados sobreviviam a uma falha de host e quais não sobreviviam. A AceMQ avaliou a implementação face aos requisitos reais de cada carga de trabalho.

Desafio

As opções de persistência do Redis trocam durabilidade por latência de formas fáceis de configurar mal e difíceis de notar até haver uma falha. As instâncias do organismo usavam intervalos de snapshot que perderiam minutos de escritas, enquanto se partia do princípio de que algumas cargas de trabalho eram duráveis. A replicação e o failover nunca tinham sido testados, pelo que o comportamento da promoção e a perda de dados no failover eram desconhecidos.

Ambiente

Instâncias Redis on-premises com failover gerido pelo Sentinel, ao serviço de cargas de trabalho de cache, filas e sessões.

Abordagem

A AceMQ classificou cada carga de trabalho pela perda que podia realmente tolerar e comparou-a com o que a configuração atual garantia. O failover foi exercitado de forma deliberada, com a perda de dados medida e não estimada, para que a diferença entre o pressuposto e o comportamento ficasse documentada com evidências.

Solução

  1. Classificação de cada carga de trabalho pela perda de dados tolerável e comparação com o que a configuração garante de facto
  2. Revisão dos intervalos de snapshot e da política de fsync do append-only file em cada instância face a esses requisitos
  3. Exercício deliberado do failover do Sentinel, com medição da perda de dados real e do tempo de promoção
  4. Avaliação da topologia de replicação, da configuração de quórum e da exposição a split-brain
  5. Verificação dos procedimentos de restauro a partir dos artefactos de persistência existentes, com testes de recuperação cronometrados
  6. Entrega de uma matriz de durabilidade por carga de trabalho, com as alterações de configuração necessárias para fechar cada lacuna

Resultado final

O organismo recebeu uma declaração documentada e sustentada em evidências sobre aquilo a que cada carga de trabalho sobrevive, em substituição de um pressuposto nunca testado. Duas cargas de trabalho que se julgavam duráveis afinal não o eram, e foram reconfiguradas antes de uma falha o demonstrar.

Tecnologias

RedisRedis SentinelLinuxPrometheus

Pronto para um health check ao Redis?

Os engenheiros seniores de Redis da AceMQ já trataram exatamente este tipo de projeto. Quer precise de orientação de arquitetura, de correção prática ou de uma parceria de gestão contínua, estamos prontos para ajudar.