Volver a todos los casos de uso

ConsultoríaServicios financieros / Pagos

Pasar a Cluster mode sin romper las operaciones multiclave

Procesador global de pagos

Planificación de una migración desde Redis standalone escalado verticalmente hacia Cluster mode, incluidos el diseño de hash tags y la corrección de operaciones cross-slot.

Descripción general

Un procesador de pagos había escalado una instancia standalone de Redis hasta el host más grande disponible y ya no tenía hacia dónde crecer. Pasar a Cluster mode era la respuesta obvia, pero la aplicación usaba operaciones multiclave y scripts Lua que suponen que todas las claves viven en un mismo nodo. AceMQ planificó y validó la migración.

Desafío

Cluster mode rechaza las operaciones multiclave cuyas claves caen en slots de hash distintos. Encontrar cada una de esas operaciones en una base de código grande es más difícil de lo que parece, porque muchas se construyen de forma dinámica. Los hash tags pueden forzar a que las claves relacionadas queden en el mismo slot, pero abusar de ellos vuelve a crear el problema de nodos calientes que la migración debe resolver.

Entorno

Redis en Kubernetes como soporte de la deduplicación de transacciones, el rate limiting y el almacenamiento de claves de idempotencia.

Enfoque

AceMQ inventarió la combinación real de comandos a partir del tráfico en vivo y no solo de la revisión del código, lo que reveló operaciones multiclave construidas dinámicamente que el análisis estático había pasado por alto. Luego se restringió deliberadamente el diseño de hash tags para preservar la distribución de slots, y la migración se realizó por etapas con validación de lectura dual.

Solución

  1. Inventario de la combinación de comandos en vivo para encontrar operaciones multiclave y scripts que la revisión estática del código había pasado por alto
  2. Diseño de hash tags con un alcance lo bastante acotado para preservar la distribución de slots y mantener juntas las claves relacionadas
  3. Reescritura de las operaciones que no podían ubicarse en el mismo slot para que funcionen entre slots sin perder exactitud
  4. Validación del soporte de cluster y del manejo de redirecciones en la librería cliente antes de cualquier cambio de infraestructura
  5. Diseño de una migración por etapas con validación de lectura dual y un punto de rollback definido en cada fase
  6. Modelado de la distribución de slots y de la carga por nodo según los patrones de claves de producción antes de comprometerse con la topología

Resultado final

El procesador pasó a Cluster mode con margen de crecimiento horizontal en lugar de un techo vertical, y la distribución de slots se mantuvo pareja incluso con los patrones de claves de producción. Las operaciones multiclave que habrían fallado en silencio se encontraron y corrigieron antes del corte.

Tecnologías

RedisKubernetesTerraformPrometheus

¿Necesita orientación de arquitectura para Redis?

Los ingenieros sénior de Redis de AceMQ ya han realizado este mismo tipo de proyecto. Ya sea que necesite orientación de arquitectura, remediación práctica o una alianza continua de servicios administrados, estamos listos para ayudarlo.