Przegląd
Pub/Sub zdejmuje z zespołu obsługę brokera, ale model subskrypcji, terminy potwierdzeń, gwarancje kolejności i polityka dead-letter nadal są decyzjami projektowymi — i nadal decydują o tym, czy komunikaty zostaną utracone lub zduplikowane.
Wyzwanie
Typowe tryby awarii to ponowne dostarczenia wynikające z terminów potwierdzeń zbyt krótkich dla konsumenta, nieograniczony przyrost dead-letter, którego nikt nie obserwuje, oraz rachunek, który po wzroście wolumenu skaluje się inaczej niż obciążenie.
Środowisko
Dotyczy każdego wdrożenia Google Cloud Pub/Sub, także w środowiskach, w których działa obok samodzielnie zarządzany RabbitMQ lub Kafka.
Podejście
AceMQ przegląda projekt tematów i subskrypcji w odniesieniu do wymagań dostarczania, zachowanie potwierdzeń i ponowień w odniesieniu do rzeczywistego czasu przetwarzania przez konsumentów, politykę dead-letter i retencji oraz czynniki kosztowe dominujące przy obecnym i prognozowanym wolumenie — w tym punkt, w którym samodzielnie zarządzana komunikacja staje się tańsza.
Rozwiązanie
- Przegląd projektu tematów i subskrypcji w odniesieniu do gwarancji dostarczania
- Analiza terminów potwierdzeń i zachowania ponownych dostarczeń
- Przegląd tematu dead-letter i polityki retencji
- Weryfikacja oczekiwań dotyczących kolejności i dostarczania exactly-once
- Modelowanie kosztów przy obecnym i prognozowanym wolumenie
- Porównanie z samodzielnie zarządzanym RabbitMQ lub Kafką, jeśli jest uzasadnione
Efekt
Zespoły otrzymują jasną informację, w których miejscach ich projekt Pub/Sub będzie duplikować lub gubić komunikaty, ile będzie kosztować przy kolejnym progu wolumenu i czy zarządzana komunikacja nadal jest właściwym wyborem.