Visão geral
Um provedor de analytics para a área da saúde rodava uma única instância Redis com entradas de cache e estado de sessão de usuários. Quando a pressão de memória chegava, a política de eviction removia chaves sem considerar quais eram descartáveis, e os usuários eram desconectados no meio do fluxo de trabalho. A AceMQ assumiu o suporte Redis com engenheiros sêniores designados.
Desafio
Misturar dados de cache e de sessão em um único keyspace com uma única política de eviction significa que qualquer escolha de política está errada para uma das cargas de trabalho. Para piorar, muitas chaves de cache não tinham TTL; assim, uma política de eviction volatile não tinha nada elegível para remover, e a instância retornava erros de falta de memória. Os relatórios de memória também estavam sendo mal interpretados, com a fragmentação confundida com crescimento de dados.
Ambiente
Redis no Azure atendendo ao estado de sessão e ao cache de resultados de consultas de uma aplicação de analytics clínico.
Abordagem
A AceMQ primeiro separou as cargas de trabalho, porque nenhuma política de eviction atende às duas, e depois corrigiu a configuração de TTL e de política de cada uma. Os relatórios de memória foram esclarecidos para que a equipe de operações conseguisse distinguir crescimento de dados, fragmentação e uso de buffers de replicação.
Solução
- Separação do estado de sessão e do cache em instâncias distintas, com políticas adequadas a cada carga de trabalho
- Aplicação consistente de TTLs nas chaves de cache, para que as políticas de eviction volatile tenham candidatas elegíveis
- Definição de maxmemory e da política de eviction por instância com base no working set medido, e não na memória do host
- Esclarecimento dos relatórios de memória para que fragmentação, dados e buffers de replicação sejam lidos corretamente
- Identificação e correção dos padrões de chaves que causavam crescimento ilimitado no keyspace de cache
- Escalonamento 24/7 para engenheiros sêniores de Redis, com metas de resposta a partir de 15 minutos, conforme o plano
Resultado obtido
A perda de sessões sob pressão de memória acabou por completo, e os erros de falta de memória foram eliminados assim que a eviction passou a ter candidatas elegíveis. A equipe do cliente agora interpreta corretamente as métricas de memória e age sobre o crescimento antes que ele vire um incidente.