Torna a tutti i casi d'uso

ConsulenzaSoftware / Piattaforme digitali

Il multi-tenancy di Pulsar è reale, ma solo se le policy dei namespace sono progettate con intenzione

Fornitore di servizi gestiti

Progettazione della struttura di tenant, namespace e policy perché team indipendenti possano condividere un cluster Pulsar senza interferire l'uno con l'altro.

Panoramica

Il modello a tenant e namespace di Pulsar consente un isolamento effettivo tra i team, con quote, retention, autorizzazioni e rate limit per singolo namespace. L'isolamento, però, è buono quanto la progettazione delle policy, e le policy predefinite isolano molto poco. AceMQ progetta la struttura e l'insieme di policy che la accompagna.

Sfida

I cluster condivisi costruiti senza una progettazione dei namespace finiscono con tutto in un unico namespace, sotto le policy predefinite. La retention illimitata di un team consuma lo storage di cui ha bisogno l'intero cluster, il topic ad alto throughput di un altro satura broker condivisi con carichi di lavoro sensibili alla latenza e le autorizzazioni sono così grossolane che qualsiasi team può consumare qualsiasi topic. Introdurre l'isolamento a posteriori significa spostare i topic, il che richiede di coordinare ogni consumer.

Ambiente

Cluster Apache Pulsar condivisi su Kubernetes al servizio di più team interni o tenant esterni, spesso con geo-replica.

Approccio

AceMQ fa corrispondere tenant e namespace a confini reali di ownership e isolamento anziché a raggruppamenti arbitrari, quindi definisce l'insieme di policy per ciascuna classe di namespace: retention, quote, rate limit e autorizzazioni. Gruppi di isolamento dei broker e distribuzione dei bundle vengono usati dove la separazione dei carichi di lavoro deve estendersi fino all'hardware.

Soluzione

  1. Gerarchia di tenant e namespace modellata su ownership, classificazione dei dati e requisiti di isolamento
  2. Template di policy per namespace che coprono retention, backlog quota, TTL dei messaggi e deduplicazione
  3. Rate limit di publish e dispatch dimensionati per classe di namespace, così che un singolo tenant non possa saturare i broker condivisi
  4. Progettazione di autenticazione e autorizzazione con ruoli per namespace e credenziali token o mTLS per ciascun tenant
  5. Gruppi di isolamento dei broker e assegnazione dei bundle dove i carichi rumorosi vanno separati a livello hardware
  6. Runbook di onboarding e definizioni policy-as-code perché i nuovi tenant ereditino la progettazione anziché i valori predefiniti

Esito

I team condividono il cluster senza contendersi storage o capacità dei broker, e i nuovi tenant vengono attivati su un template di policy definito invece di ereditare i valori predefiniti. L'isolamento è garantito dalle policy, non dalle convenzioni.

Tecnologie

Apache PulsarApache BookKeeperKubernetesZooKeeper

Vi servono indicazioni sull'architettura Apache Pulsar?

Gli ingegneri Apache Pulsar senior di AceMQ hanno già gestito proprio questo tipo di progetto. Che vi servano indicazioni architetturali, remediation operativa o una partnership gestita continuativa, siamo pronti ad aiutarvi.