Die meisten Pulsar-P1 lassen sich auf eine Dimensionierungsentscheidung zurückführen, die beim Aufbau getroffen wurde. Das sind die Fragen, die wir einem Team in der ersten Woche eines Supportvertrags stellen – jeweils mit dem Grund, warum sie wichtig sind.
Wie lauten Ensemble, Write Quorum und Ack Quorum? Ein üblicher Ausgangspunkt ist ein Ensemble von 3, ein Write Quorum von 3 und ein Ack Quorum von 2; damit lässt sich ein langsamer oder ausgefallener Bookie tolerieren, ohne dass Schreibvorgänge stocken. Ein größeres Ensemble verteilt die Last auf mehr Bookies, vergrößert aber den Wirkungsradius einer langsamen Disk. Läuft ein Team mit einem Ack Quorum, das dem Write Quorum entspricht, wartet jeder Schreibvorgang auf den langsamsten Bookie, und eine einzige beeinträchtigte Disk wird zum clusterweiten Latenzproblem. Wir prüfen die Einstellung gegen die Anzahl der Bookies, die Fehlerdomänen (Rack- oder Zone-Awareness) und das Latenzbudget.
Wo liegt das Journal, und was teilt sich das Device damit? Das Journal ist ein sequenzieller, fsync-lastiger Schreibpfad. Es braucht ein eigenes, schnelles Device. Teams, die Journal- und Ledger-Verzeichnisse auf dasselbe Volume legen, sehen Compaction und Ledger-Flushes als Publish-Latenz. Wir messen die fsync-Latenz auf dem Journal-Device, bevor das erste Produktiv-Topic läuft.
Wie viele Bundles hat jeder Namespace, und wie viele Topics sind stark genutzt? Topics werden per Hash auf Bundles abgebildet. Ein Namespace, der mit der Standardanzahl an Bundles erstellt wurde und einige sehr stark genutzte Topics enthält, kann den Großteil des Traffics auf einen Broker legen. Bundles früh zu teilen kostet wenig; unter Last zu teilen verursacht die Reconnect-Ausreißer aus Problem 4. Wir dimensionieren Bundles anhand der erwarteten Topic-Anzahl und der Raten der meistgenutzten Topics.
Welche Topics brauchen Compaction, und wer liest sie? Kompaktierte Topics sind günstig, bis eine Compaction zurückfällt und ein Consumer, der die kompaktierte Sicht liest, veraltete Daten sieht. Wir prüfen Compaction-Schwellenwerte und Lauf-Status pro Topic.
Was teilen sich Pulsar Functions und Connectors mit den Brokern? Functions, die im Broker-Prozess laufen, teilen sich dessen Speicher und CPU. Eine Function mit Memory Leak wird zum Broker-Incident. Wir bevorzugen separate Function-Worker für die Produktion und prüfen deren Ressourcenlimits.
Was passiert mit einer Subscription, wenn ihre Consumer wegfallen? Durable Subscriptions behalten Cursor und Rückstau für immer, sofern keine TTL- oder Expiry-Policy sie entfernt. Eine vergessene Subscription eines stillgelegten Service ist die häufigste Quelle für einen Rückstau, der wochenlang wächst und dann Producer blockiert. In jedem Review listen wir Subscriptions mit Rückstau und ohne aktiven Consumer auf.