Visão geral
Os processos Boomi movimentavam transações reguladas entre sistemas, com o RabbitMQ como transporte entre eles. Recuperar-se de um evento no data center significava uma promoção manual que ninguém havia praticado, e, depois que uma mensagem era consumida, não havia como fazer replay dela.
Desafio
Duas lacunas se agravavam mutuamente. O failover dependia de uma pessoa seguindo um procedimento nunca ensaiado e, como as filas descartam as mensagens ao consumi-las, não havia uma forma compatível com auditoria de reconstruir o que tinha trafegado durante um incidente. As duas precisavam ser resolvidas sem quebrar os controles contra os quais o ambiente é auditado.
Ambiente
Processos de integração Boomi sobre RabbitMQ em uma plataforma de contêineres, abrangendo um data center primário e um de recuperação de desastres.
Abordagem
A AceMQ produziu um desenho de recuperação de desastres que cobre o failover manual e o automatizado, incluindo o que a distribuição comercial do RabbitMQ muda na opção automatizada. Em paralelo, avaliamos a conversão de filas selecionadas em streams, para que as mensagens continuem disponíveis para replay após o consumo, e especificamos uma camada de buffer para que os processos Boomi se degradem, em vez de falhar, quando o broker estiver inacessível.
Solução
- Desenho de recuperação de desastres comparando a promoção manual com o failover automatizado
- Dimensionamento dos clusters nos data centers primário e de DR
- Avaliação da conversão de filas em streams para que as mensagens continuem disponíveis para replay após o consumo
- Revisão do replay em relação aos controles de auditoria e retenção do ambiente
- Camada de buffer para que os processos de integração se degradem em vez de falhar durante uma indisponibilidade
- Runbook operacional e treinamento para as equipes de suporte e desenvolvimento
Resultado obtido
O ambiente de integrações passou a ter um procedimento de recuperação ensaiado, uma resposta defensável sobre o que aconteceu durante uma indisponibilidade e um runbook que os próprios engenheiros conseguem executar sem depender de um fornecedor.