Visão geral
A empresa opera serviços de câmbio e pagamentos com o RabbitMQ integrado ao BizTalk e ao Dynamics 365. A gestão manual das filas de erro consumia muito tempo da equipe, com várias intervenções diárias para liberar mensagens presas.
Desafio
Gargalos nos serviços downstream do BizTalk e do D365 causavam erros 400 Bad Request, inundando filas de erro que exigiam intervenção manual várias vezes por dia. Sem lógica automatizada de retentativa nem tratamento de dead-letter, a equipe passava horas limpando filas de erro em vez de se concentrar nas operações do negócio. Além disso, a gestão de espaço em disco e a rotação de logs causavam instabilidade operacional.
Ambiente
Implantação de RabbitMQ em Windows, camada de integração BizTalk, Dynamics 365, IBM MQ para as operações do Connect Direct e vários ambientes de produção.
Abordagem
A AceMQ conduziu uma avaliação abrangente que identificou tarefas de correção de prioridade crítica e média. A equipe implementou estratégias automatizadas de retentativa usando dead-letter exchanges do RabbitMQ e o plugin Shovel, além de tratar questões operacionais como a rotação de logs e os alertas de espaço em disco.
Solução
- Implementação de uma policy de dead-letter do RabbitMQ com número de retentativas configurável e dead-letter exchanges
- Configuração do plugin Shovel para retentativa automatizada de mensagens a partir das filas de erro
- Desenho de uma estratégia de retentativa baseada em nack, com mecanismos de atraso para aliviar a pressão sobre os sistemas downstream
- Implementação de rotação de logs mantendo 10 arquivos comprimidos e de alertas de espaço em disco com limite de 2 GB
- Configuração do monitoramento de métricas dos consumidores para detectar back-pressure
- Criação de um arquivo histórico de dead-letters para análise pós-incidente
Resultado obtido
O cliente reduziu de forma significativa as intervenções manuais nas filas de erro, que passaram de várias operações diárias a raras exceções. O tratamento automatizado de retentativas e o monitoramento aprimorado dão aviso antecipado de problemas nos sistemas downstream antes que eles afetem as operações.