Visão geral
A empresa opera uma plataforma global de pagamentos baseada em microsserviços, com o RabbitMQ como espinha dorsal da mensageria. Com mais de 200 mudanças em produção por semana e requisitos rigorosos de disponibilidade, qualquer instabilidade no RabbitMQ afeta diretamente o processamento de pagamentos.
Desafio
Uma falha de rede na AWS provocou bindings de mensagens incorretos e falhas de entrega entre zonas de disponibilidade. As mensagens estavam sendo roteadas de forma errada por causa de falhas de comunicação entre as AZs, o que causava processamento duplicado e falhas de entrega. A equipe precisava migrar das classic mirrored queues para filas de quórum (quorum queues), para garantir a compatibilidade com o RabbitMQ 4.x, mantendo a operação sem nenhuma indisponibilidade.
Ambiente
Deploy multi-AZ na AWS, RabbitMQ 3.13 com caminho de migração para o 4.1, arquitetura de microsserviços com Spring AMQP e orquestração com Kubernetes.
Abordagem
A AceMQ fez uma avaliação completa das definições do RabbitMQ em produção, identificou erros de políticas e de regex e entregou documentação de boas práticas para o uso do AMQP com Spring Boot, cobrindo concorrência, bindings, políticas e tratamento de partições de cluster.
Solução
- Diagnóstico da causa raiz do impacto da falha de rede da AWS no comportamento de partição do cluster RabbitMQ
- Recomendação de migrar o tratamento de partições de 'auto heal' para 'pause minority', para evitar perda de dados
- Implementação de publisher confirms e event listeners para a lógica de retentativa nos clientes Spring AMQP
- Desenho de uma estratégia de gerenciamento dinâmico de filas para evitar vazamento de recursos nos microsserviços
- Planejamento do caminho de migração das classic mirrored queues para filas de quórum no RabbitMQ 4.x
Resultado obtido
O cliente ganhou mais resiliência no RabbitMQ, com tratamento adequado de partições, menor risco de perda de mensagens durante eventos de rede e um caminho de migração claro para filas de quórum, garantindo estabilidade no longo prazo.