Visão geral
Os processos Boomi transferiam transações reguladas entre sistemas, com o RabbitMQ como transporte entre eles. Recuperar de um incidente no centro de dados implicava uma promoção manual que ninguém tinha praticado e, uma vez consumida uma mensagem, não havia forma de a reproduzir.
Desafio
Duas lacunas agravavam-se mutuamente. O failover dependia de uma pessoa a seguir um procedimento nunca ensaiado e, como as filas descartam as mensagens quando são consumidas, não havia uma forma compatível com a auditoria de reconstituir o que tinha circulado durante um incidente. Ambas tinham de ser resolvidas sem quebrar os controlos face aos quais o parque é auditado.
Ambiente
Processos de integração Boomi sobre RabbitMQ numa plataforma de contentores, distribuídos por um centro de dados principal e um centro de dados de disaster recovery.
Abordagem
A AceMQ elaborou um desenho de disaster recovery que cobre o failover manual e o automático, incluindo o que a distribuição comercial do RabbitMQ altera na opção automática. Em paralelo, avaliámos a conversão de filas selecionadas em streams, para que as mensagens continuem a poder ser reproduzidas depois de consumidas, e especificámos uma camada de buffering para que os processos Boomi se degradem em vez de falharem quando o broker está inacessível.
Solução
- Desenho de disaster recovery que compara a promoção manual com o failover automático
- Dimensionamento dos clusters nos centros de dados principal e de DR
- Avaliação da conversão de filas em streams, para que as mensagens possam ser reproduzidas depois de consumidas
- Revisão do replay face aos controlos de auditoria e de retenção do parque
- Camada de buffering para que os processos de integração se degradem em vez de falharem durante uma indisponibilidade
- Runbook operacional e formação para as equipas de suporte e de desenvolvimento
Resultado final
O parque de integrações ganhou um procedimento de recuperação ensaiado, uma resposta defensável sobre o que aconteceu durante uma indisponibilidade e um runbook que os seus próprios engenheiros conseguem executar sem esperar por um fornecedor.