Descripción general
Un proveedor de analítica para el sector salud operaba una sola instancia de Redis que contenía tanto entradas de caché como el estado de las sesiones de usuario. Cuando aparecía la presión de memoria, la política de desalojo eliminaba claves sin distinguir cuáles eran descartables, así que los usuarios perdían la sesión en medio de su trabajo. AceMQ asumió el soporte de Redis con ingenieros sénior asignados.
Desafío
Mezclar datos de caché y de sesión en un mismo keyspace con una sola política de desalojo significa que cualquier política elegida es incorrecta para una de las dos cargas de trabajo. Para empeorar las cosas, muchas claves de caché no tenían ningún TTL, así que una política de desalojo volatile no tenía nada elegible para desalojar y la instancia devolvía errores de memoria insuficiente. Además, los reportes de memoria se interpretaban mal: la fragmentación se confundía con crecimiento de datos.
Entorno
Redis en Azure como soporte del estado de sesión y de la caché de resultados de consultas de una aplicación de analítica clínica.
Enfoque
AceMQ separó primero las cargas de trabajo, porque ninguna política de desalojo sirve para ambas, y luego corrigió la configuración de TTL y de políticas de cada una. Se aclararon los reportes de memoria para que el equipo de operaciones pudiera distinguir el crecimiento de datos, la fragmentación y el uso de los buffers de replicación.
Solución
- Separación del estado de sesión y la caché en instancias distintas, con políticas adecuadas para cada carga de trabajo
- Aplicación coherente de TTL en las claves de caché para que las políticas de desalojo volatile tengan candidatas elegibles
- Configuración de maxmemory y de la política de desalojo por instancia según el working set medido, no según la memoria del host
- Aclaración de los reportes de memoria para interpretar correctamente la fragmentación, los datos y los buffers de replicación
- Identificación y corrección de los patrones de claves que provocaban un crecimiento sin límite del keyspace de caché
- Escalamiento 24/7 a ingenieros sénior de Redis con objetivos de respuesta desde 15 minutos, según el plan
Resultado final
La pérdida de sesiones bajo presión de memoria se detuvo por completo, y los errores de memoria insuficiente desaparecieron una vez que el desalojo tuvo candidatas elegibles. El equipo del cliente ahora interpreta correctamente las métricas de memoria y actúa ante el crecimiento antes de que se convierta en un incidente.