Descripción general
Un proveedor de analítica para el sector sanitario operaba una sola instancia de Redis que contenía tanto entradas de caché como el estado de las sesiones de usuario. Cuando aparecía la presión de memoria, la política de expulsión eliminaba claves sin distinguir cuáles eran prescindibles, así que los usuarios perdían la sesión en mitad de su trabajo. AceMQ asumió el soporte de Redis con ingenieros sénior asignados.
Reto
Mezclar datos de caché y de sesión en un mismo keyspace con una sola política de expulsión significa que cualquier política elegida es incorrecta para una de las dos cargas de trabajo. Para empeorar las cosas, muchas claves de caché no tenían ningún TTL, así que una política de expulsión volatile no tenía nada que pudiera expulsar y la instancia devolvía errores de memoria insuficiente. Además, los informes de memoria se interpretaban mal: la fragmentación se confundía con crecimiento de datos.
Entorno
Redis en Azure como soporte del estado de sesión y de la caché de resultados de consultas de una aplicación de analítica clínica.
Enfoque
AceMQ separó primero las cargas de trabajo, porque ninguna política de expulsión sirve para ambas, y después corrigió la configuración de TTL y de políticas de cada una. Se aclararon los informes de memoria para que el equipo de operaciones pudiera distinguir el crecimiento de datos, la fragmentación y el uso de los buffers de replicación.
Solución
- Separación del estado de sesión y la caché en instancias distintas, con políticas adecuadas para cada carga de trabajo
- Aplicación coherente de TTL en las claves de caché para que las políticas de expulsión volatile tengan claves candidatas
- Configuración de maxmemory y de la política de expulsión por instancia según el working set medido, no según la memoria del host
- Aclaración de los informes de memoria para interpretar correctamente la fragmentación, los datos y los buffers de replicación
- Identificación y corrección de los patrones de claves que provocaban un crecimiento sin límite del keyspace de caché
- Escalado 24/7 a ingenieros sénior de Redis con objetivos de respuesta desde 15 minutos, según el plan
Resultado final
La pérdida de sesiones bajo presión de memoria cesó por completo, y los errores de memoria insuficiente desaparecieron en cuanto la expulsión tuvo claves candidatas. El equipo del cliente interpreta ahora correctamente las métricas de memoria y actúa ante el crecimiento antes de que se convierta en un incidente.