Visão geral
O Pub/Sub tira da equipe a operação do broker, mas o modelo de assinatura, os prazos de acknowledgement, as garantias de ordenação e a política de dead-letter continuam sendo decisões de design, e continuam decidindo se as mensagens serão perdidas ou duplicadas.
Desafio
Os modos de falha mais comuns são reentregas causadas por prazos de acknowledgement curtos demais para o consumidor, um crescimento ilimitado de dead-letters que ninguém acompanha e uma fatura que escala de forma diferente da carga de trabalho quando o volume aumenta.
Ambiente
Aplicável a qualquer deployment do Google Cloud Pub/Sub, inclusive ambientes que convivem com RabbitMQ ou Kafka autogerenciados.
Abordagem
A AceMQ revisa o design de tópicos e assinaturas em relação aos requisitos de entrega, o comportamento de acknowledgement e retry em relação ao tempo real de processamento dos consumidores, a política de dead-letter e de retenção e os fatores de custo que predominam no volume atual e no projetado, incluindo o ponto em que a mensageria autogerenciada passa a ser mais barata.
Solução
- Revisão do design de tópicos e assinaturas em relação às garantias de entrega
- Análise do prazo de acknowledgement e do comportamento de reentrega
- Revisão do tópico de dead-letter e da política de retenção
- Validação das expectativas de ordenação e de exactly-once
- Modelagem de custos no volume atual e no projetado
- Comparação com RabbitMQ ou Kafka autogerenciados, quando isso se justifica
Resultado obtido
As equipes recebem uma análise clara de onde o design do Pub/Sub vai duplicar ou descartar mensagens, de quanto ele vai custar no próximo patamar de volume e de se a mensageria gerenciada ainda é a escolha certa.