Descripción general
La empresa opera una plataforma global de pagos basada en microservicios, con RabbitMQ como columna vertebral de su mensajería. Con más de 200 cambios en producción por semana y requisitos estrictos de disponibilidad, cualquier inestabilidad de RabbitMQ afecta directamente al procesamiento de pagos.
Reto
Una caída de red en AWS provocó bindings de mensajes incorrectos y fallos de entrega entre zonas de disponibilidad. Los mensajes se enrutaban de forma incorrecta por fallos de comunicación entre AZ, lo que causaba procesamiento duplicado y fallos de entrega. El equipo necesitaba migrar de colas clásicas en espejo (classic mirrored queues) a colas de quórum (quorum queues) para ser compatible con RabbitMQ 4.x, sin interrumpir las operaciones.
Entorno
Despliegue multi-AZ en AWS, RabbitMQ 3.13 con ruta de migración a 4.1, arquitectura de microservicios con Spring AMQP y orquestación con Kubernetes.
Enfoque
AceMQ realizó una evaluación integral de las definiciones de RabbitMQ en producción, identificó errores en políticas y expresiones regulares, y entregó documentación de buenas prácticas para el uso de AMQP con Spring Boot, que abarca concurrencia, bindings, políticas y gestión de particiones del clúster.
Solución
- Diagnóstico de la causa raíz del impacto de la caída de red de AWS en el comportamiento del clúster de RabbitMQ ante particiones
- Recomendación de migrar la gestión de particiones de 'auto heal' a 'pause minority' para evitar la pérdida de datos
- Implementación de publisher confirms y event listeners para la lógica de reintentos en los clientes de Spring AMQP
- Diseño de una estrategia de gestión dinámica de colas para evitar fugas de recursos en los microservicios
- Planificación de la ruta de migración de colas clásicas en espejo a colas de quórum para RabbitMQ 4.x
Resultado final
El cliente obtuvo una mayor resiliencia de RabbitMQ con una gestión adecuada de las particiones, menor riesgo de pérdida de mensajes ante eventos de red y una ruta clara de migración a colas de quórum para lograr estabilidad a largo plazo.