Descripción general
La empresa opera servicios de intercambio de pagos con RabbitMQ integrado con BizTalk y Dynamics 365. La gestión manual de las colas de errores consumía mucho tiempo del personal, con varias intervenciones diarias para destrabar mensajes atascados.
Desafío
Los cuellos de botella downstream en los servicios de BizTalk y D365 provocaban errores 400 Bad Request que inundaban las colas de errores y exigían intervención manual varias veces al día. Al no haber lógica de reintentos automatizada ni manejo de dead-letter, el personal pasaba horas vaciando colas de errores en lugar de concentrarse en las operaciones del negocio. Además, la gestión del espacio en disco y la rotación de logs causaban inestabilidad operativa.
Entorno
Despliegue de RabbitMQ sobre Windows, capa de integración BizTalk, Dynamics 365, IBM MQ para operaciones de Connect Direct y varios entornos de producción.
Enfoque
AceMQ realizó una evaluación integral que identificó tareas de remediación críticas y de prioridad media. El equipo implementó estrategias de reintento automatizadas con dead-letter exchanges de RabbitMQ y el plugin Shovel, y además atendió aspectos operativos como la rotación de logs y las alertas de espacio en disco.
Solución
- Implementación de una política de dead-letter en RabbitMQ con cantidad de reintentos configurable y dead-letter exchanges
- Configuración del plugin Shovel para reintentar automáticamente los mensajes desde las colas de errores
- Diseño de una estrategia de reintentos basada en nack con mecanismos de demora para aliviar la presión downstream
- Implementación de rotación de logs que conserva 10 archivos comprimidos y alertas de espacio en disco con un umbral de 2GB
- Configuración del monitoreo de métricas de los consumidores para detectar back-pressure
- Creación de un archivo histórico de dead-letter para el análisis posterior a los incidentes
Resultado final
El cliente redujo de forma significativa las intervenciones manuales en las colas de errores, que pasaron de varias operaciones diarias a excepciones poco frecuentes. El manejo automatizado de reintentos y un mejor monitoreo dan aviso temprano de los problemas downstream antes de que afecten la operación.