BlogueRabbitMQ

RabbitMQ em EKS, AKS ou GKE: como escolher um fornecedor de Kubernetes gerido

Scott Sternloff

Por Scott Sternloff, Arquiteto empresarial sénior

LinkedIn · Atualizado a · 7 min de leitura

RabbitMQ em EKS, AKS ou GKE: como escolher um fornecedor de Kubernetes gerido
On this page

A própria documentação do RabbitMQ diz que o seu Kubernetes Operator funciona em «qualquer plataforma compatível com Kubernetes» e fica por aí: não faz distinção entre EKS, AKS e GKE. As diferenças que importam realmente num cluster RabbitMQ stateful não estão no operator, que funciona de forma idêntica em todo o lado; estão nas storage classes predefinidas de cada fornecedor, na topologia de zonas de disponibilidade e no comportamento do load balancer. São essas as decisões de que trata, na verdade, esta comparação.

O que não muda entre fornecedores

O RabbitMQ Cluster Operator é a forma correta de executar RabbitMQ em Kubernetes, seja qual for o fornecedor: gere o ciclo de vida do cluster, expõe a configuração através de um custom resource nativo do Kubernetes e trata do provisionamento, da escalabilidade e das atualizações através da mesma API no EKS, no AKS ou no GKE. Se tiver um manifesto que funciona num deles, só precisa das anotações de storage class e de rede específicas do fornecedor para o executar noutro, e não de um redesenho.

As filas de quórum (quorum queues) são a opção predefinida certa em qualquer implementação Kubernetes, em qualquer fornecedor. O reagendamento de pods é mais frequente em Kubernetes do que em VMs estáticas (drains de nós, eventos de autoscaling e rolling updates movimentam os pods) e a replicação baseada em Raft das filas de quórum tolera isso muito melhor do que o antigo modelo de classic mirrored queues, que nunca foi pensado para uma rotação frequente de nós.

Armazenamento: onde os fornecedores diferem realmente

A camada de persistência do RabbitMQ (os ficheiros WAL e de segmentos das filas de quórum, mais a base de dados de esquema Mnesia) precisa de um PersistentVolumeClaim assente em armazenamento em bloco rápido e durável. Os três fornecedores usam por omissão uma storage class de uso geral, utilizável mas não afinada de origem para esta carga de trabalho.

  • O EKS usa por omissão volumes EBS gp3 através do driver AWS EBS CSI. O gp3 desassocia as IOPS e o débito do tamanho do volume, pelo que pode provisionar o desempenho de que o RabbitMQ precisa sem sobreprovisionar capacidade de que não precisa.
  • O AKS usa por omissão Azure Premium SSD através do driver Azure Disk CSI, que associa os níveis de desempenho ao tamanho do disco de forma mais direta do que o gp3; subdimensionar o volume por razões de capacidade pode deixá-lo também com IOPS insuficientes.
  • O GKE usa por omissão Persistent Disk (pd-balanced ou pd-ssd) através do driver GCE PD CSI, sendo o pd-ssd mais adequado do que o nível balanced ao padrão de escrita de um message broker.

Em todos os casos, a storage class predefinida no quickstart de cada fornecedor raramente é a certa para uma implementação RabbitMQ de produção. Defina-a explicitamente em vez de aceitar a predefinição do cluster.

Topologia de zonas de disponibilidade e anti-afinidade

Um cluster RabbitMQ de três nós precisa de ter os nós distribuídos por domínios de falha separados para ter alta disponibilidade digna desse nome: colocar as três réplicas em nós da mesma zona de disponibilidade anula o propósito do clustering.

O EKS, o AKS e o GKE suportam agendamento de pods com noção de topologia através das topology spread constraints e das regras de anti-afinidade de nós padrão do Kubernetes, e nenhum dos três exige nada de específico do RabbitMQ para as usar. A diferença é operacional: os node pools geridos de cada fornecedor tratam o autoscaling por zona de forma ligeiramente diferente, e vale a pena confirmar (antes de passar a produção, e não depois de um incidente) que a configuração do seu node pool garante efetivamente que a regra de anti-afinidade pode ser cumprida, em vez de deixar pods pendentes por não existir nenhum nó elegível na zona exigida.

Rede e a interface de gestão

Expor a interface de gestão ou o listener AMQP do RabbitMQ fora do cluster implica passar pelo tipo de serviço load balancer de cada fornecedor, e aqui as predefinições voltam a divergir: o EKS provisiona um Classic ou Network Load Balancer consoante as anotações, o AKS provisiona um Azure Load Balancer e o GKE provisiona um Google Cloud Load Balancer, cada um com a sua sintaxe de anotações para health checks, connection draining e exposição interna ou externa.

A predefinição mais segura nos três: manter a interface de gestão apenas interna, acessível através de VPN, bastion ou load balancer interno em vez de um endpoint público, e expor apenas a porta AMQP de que os clientes precisam realmente. É a orientação de segurança habitual do RabbitMQ, seja qual for o fornecedor de Kubernetes; só são precisas anotações diferentes para a aplicar em cada um.

Quando optar pelo Kubernetes em vez de um serviço gerido

Executar RabbitMQ em Kubernetes faz sentido quando a sua equipa já opera um cluster Kubernetes de produção e pretende que o RabbitMQ encaixe no mesmo modelo de implementação, monitorização e escalabilidade de tudo o resto. Traz valor real: o Operator oferece gestão declarativa do cluster e colocar o RabbitMQ junto dos serviços que comunicam com ele pode simplificar a rede.

Também tem um custo real: a afinação da storage class, a configuração de anti-afinidade e a configuração do load balancer descritas acima ficam a seu cargo, e nada disso é automático. Um message broker totalmente gerido (incluindo as ofertas de RabbitMQ gerido da AceMQ) troca esse controlo por ter outra pessoa responsável por essas decisões. A escolha certa depende de a maturidade operacional da sua equipa em Kubernetes já existir, e não da cloud em que por acaso está.

Há uma terceira opção entre executar o Operator por conta própria e passar para um broker alojado por um fornecedor: os serviços geridos de RabbitMQ da AceMQ, em que os nossos engenheiros operam o cluster no seu EKS, AKS ou GKE (ou o alojam) com objetivos de resposta a partir de 15 minutos, consoante o plano.

Dois complementos a esta comparação: o guia de RabbitMQ em Kubernetes, para o executar bem em qualquer um dos três, e a comparação das opções de RabbitMQ gerido, para o caso em que a resposta é não o executar de todo.

Fale com a AceMQ sobre a sua implementação em Kubernetes

Está a implementar ou a resolver problemas de RabbitMQ em EKS, AKS ou GKE? Fale com a AceMQ ou conheça os serviços de RabbitMQ em Kubernetes e contentorização e o que monitorizar quando já estiver em funcionamento.

Especificamente no Azure, não existe RabbitMQ gerido nativo, o que muda as opções: executar RabbitMQ no Azure.

Perguntas frequentes

Como se comparam o EKS, o AKS e o GKE para implementar RabbitMQ?

A própria documentação do RabbitMQ trata o Kubernetes como uma única plataforma compatível, sem orientações específicas por fornecedor. As verdadeiras diferenças para um cluster RabbitMQ stateful estão nas storage classes predefinidas, na topologia de zonas de disponibilidade e no comportamento do load balancer, e não no RabbitMQ Operator em si, que funciona de forma idêntica nos três.

Quais são as boas práticas para implementar RabbitMQ em Kubernetes?

Utilize o RabbitMQ Cluster Operator em vez de manifestos feitos à mão, fixe a anti-afinidade dos pods entre nós e zonas de disponibilidade, use uma storage class assente em volumes rápidos equivalentes a SSD e dimensione os PersistentVolumeClaims com margem para os ficheiros WAL e de segmentos das filas de quórum.

Devo implementar o RabbitMQ em Kubernetes ou usar antes um serviço de mensagens gerido?

O Kubernetes faz sentido quando pretende o mesmo modelo operacional de RabbitMQ que usaria em qualquer outro lado, com as ferramentas de cluster que já tem. Um message broker totalmente gerido troca esse controlo por menos carga operacional; a escolha certa depende de a sua equipa já operar Kubernetes com qualidade de produção.

Quais são as principais funcionalidades do RabbitMQ Kubernetes Operator?

Gere o ciclo de vida do cluster (provisionamento, escalabilidade, atualizações), expõe a configuração através de um custom resource nativo do Kubernetes e integra-se com as primitivas padrão do Kubernetes para armazenamento, rede e secrets. O mesmo operator funciona sem alterações no EKS, no AKS e no GKE.

A escolha entre filas clássicas e de quórum importa numa implementação em Kubernetes?

As filas de quórum (quorum queues) são a opção predefinida certa em Kubernetes. Os reinícios e reagendamentos de pods são mais frequentes num ambiente Kubernetes do que em VMs estáticas, e a replicação baseada em Raft das filas de quórum tolera isso muito melhor do que as classic mirrored queues.

Qual é a cloud mais barata para executar RabbitMQ em Kubernetes?

Os preços de computação e armazenamento evoluem independentemente do RabbitMQ e mudam com frequência nos três fornecedores. As diferenças operacionais nas storage classes e na rede pesam mais na fiabilidade de uma implementação RabbitMQ do que o preço por hora da computação.

Scott Sternloff

Autor

Scott SternloffArquiteto empresarial sénior

Arquiteto empresarial sénior na AceMQ. Escreve aqui os conteúdos técnicos: arquitetura, clustering e migrações de RabbitMQ, Kafka e Redis.

Talk to an engineer

Need a hand with RabbitMQ?

Senior engineers who run it in production. Get a quote or a free consultation, no sales pitch.

Consulta gratuita

Obtenha uma análise especializada de cluster RabbitMQ

Quer esteja a resolver um incidente em produção, a planear uma migração ou queira uma segunda opinião sobre a sua arquitetura, a nossa equipa está pronta. Sem discursos de vendas, apenas respostas.

Enviar e-mail