BlogRabbitMQ

RabbitMQ Federation vs Shovel para DR: cuál usar y cuándo

Scott Sternloff

Por Scott Sternloff, Arquitecto empresarial sénior

LinkedIn · Actualizado el · 19 min de lectura

RabbitMQ Federation vs Shovel para DR: cuál usar y cuándo
On this page

RabbitMQ entre regiones es un problema de movimiento de mensajes, no de replicación

La pregunta que más escuchamos de los arquitectos que planifican una segunda región es alguna variante de «¿federation o shovel en RabbitMQ para DR?». Es la pregunta correcta, pero esconde un supuesto equivocado. Ambos plugins mueven mensajes entre clústeres que no comparten estado. Ninguno copia una cola. Ninguno mantiene dos clústeres sincronizados. Si su plan de DR espera que el standby contenga los mismos mensajes que el primario en el momento de la falla, tanto federation como shovel lo van a decepcionar, y la decepción llegará en el peor momento posible.

Entonces, ¿RabbitMQ Federation sirve para la recuperación ante desastres? Sí, para un tipo concreto de DR: uno en el que usted acepta una ventana acotada de pérdida o duplicación de mensajes en tránsito, diseña los consumidores para tolerar la reproducción y usa el plugin para mantener activa una segunda región con el tráfico que necesita. Lo mismo vale para shovel. Este artículo explica qué hace realmente cada plugin en RabbitMQ 3.13 y 4.x, en qué difiere su semántica de formas que importan para la recuperación y cómo los combinamos en un diseño de dos regiones que sobrevive a una caída regional sin inventar mensajes ni perderlos en silencio.

Una aclaración de alcance. El dimensionamiento del clúster, la cantidad de nodos y la distribución en varias AZ dentro de una región se tratan en nuestra guía de alta disponibilidad y dimensionamiento de clústeres de RabbitMQ, y no repetiremos ese material aquí.

Cómo funciona federation: exchanges, colas, upstreams y saltos

Federation es un modelo pull. Un clúster downstream declara un upstream, abre una conexión AMQP hacia él y le pide mensajes. El enlace pertenece al downstream, y por eso es el lado que se configura, aunque habilitamos el plugin en ambos lados para poder invertir los roles.

Hay dos variantes. Exchange federation hace que un exchange del downstream reciba los mensajes publicados en un exchange con el mismo nombre en el upstream. Internamente, el downstream crea una cola interna en el upstream, la vincula con los mismos bindings que existen en el exchange del downstream y consume de ella. Solo cruzan el enlace los mensajes que coinciden con un binding del downstream, así que un downstream sin bindings no recibe nada. Queue federation hace que una cola del downstream tome mensajes de una cola con el mismo nombre en el upstream, pero solo cuando la cola del downstream tiene consumidores y la del upstream tiene mensajes listos. Equilibra la carga entre sitios en lugar de copiar: un mensaje que pasa al downstream desaparece de la cola del upstream.

El parámetro max-hops de la definición del upstream controla hasta dónde se propaga un mensaje por una cadena de exchanges federados. El valor predeterminado es 1: un mensaje cruza un enlace y se detiene. Federation agrega un header x-received-from en cada salto y no reenvía un mensaje a un upstream por el que ya pasó, y eso es lo que evita los bucles en una configuración bidireccional. Deje max-hops en 1, salvo que esté construyendo una malla a propósito.

Cuando el upstream no está disponible, el downstream sigue atendiendo a los publicadores y consumidores locales. El enlace reintenta cada reconnect-delay segundos, cinco por defecto, hasta que el upstream vuelve. Los mensajes publicados en el upstream durante la caída se acumulan en la cola interna del lado del upstream, limitada solo por el message-ttl y el expires que haya definido en el upstream, y se vacían cuando el enlace se restablece. Esa es la propiedad más útil de federation para DR y también su trampa más común, porque una cola del upstream sin límite durante una caída larga puede llevar al upstream a una alarma de disco.

El orden se conserva en un enlace sano porque la cola interna es FIFO con un solo consumidor. No está garantizado a través de una reconexión, y el ack-mode predeterminado, on-confirm, puede volver a entregar mensajes que estaban en tránsito cuando se cayó el enlace. Federation ofrece entrega al menos una vez (at-least-once) a través del enlace, nunca exactamente una vez. Y para decirlo con claridad: federation no es replicación ni un espejo. Un exchange federado en el standby no sabe nada de los mensajes que esperan sin consumir en las colas del primario.

# On the downstream (standby) cluster
rabbitmqctl set_parameter federation-upstream east \
  '{"uri":["amqps://fed:REDACTED@east-a.example.internal:5671","amqps://fed:REDACTED@east-b.example.internal:5671"],"max-hops":1,"ack-mode":"on-confirm","message-ttl":3600000,"expires":86400000,"reconnect-delay":5}'

rabbitmqctl set_policy --apply-to exchanges federate-events "^events\." \
  '{"federation-upstream-set":"all"}'

La URI es una lista a propósito. Si el primer nodo del upstream está caído, el enlace prueba con el siguiente, que es exactamente lo que debe hacer un enlace de DR.

Cómo funciona Shovel: shovels estáticos, dinámicos y modos de ack

Un shovel es un consumidor y un publicador unidos dentro del broker. Consume de una cola de origen, publica en un exchange o cola de destino y confirma en el origen según su ack-mode. Los mensajes salen del origen. Esa es la diferencia fundamental con exchange federation: un shovel mueve; federation copia según los bindings.

Los shovels estáticos se definen en advanced.config y requieren reiniciar el nodo para cambiarlos, así que sirven para conexiones fijas. Los shovels dinámicos son parámetros de runtime, se crean con rabbitmqctl set_parameter shovel o con la API de management y se pueden agregar, modificar y eliminar en caliente. Para DR usamos casi exclusivamente shovels dinámicos, porque el failover y el failback son justamente los momentos en que hay que reconfigurar sin reiniciar un nodo. Un shovel dinámico se ejecuta en un nodo; si ese nodo falla, el shovel se reinicia en otro.

El ack-mode decide qué puede perder un shovel. Con on-confirm, el valor predeterminado, el shovel confirma el mensaje en el origen solo después de que el destino lo confirma, así que una caída entre la publicación y la confirmación puede producir un duplicado, pero nunca una pérdida. Con on-publish, el shovel confirma en cuanto el mensaje se escribe en la conexión de destino, antes de la confirmación, así que una falla del destino en el momento equivocado lo pierde. Con no-ack, el shovel usa acknowledgement automático en el origen y pierde lo que haya en su búfer de prefetch cuando algo falla. Para el tráfico de DR hay una sola respuesta correcta, y es on-confirm.

El comportamiento de reconexión es igual al de federation: si se pierde cualquiera de los extremos, el shovel espera reconnect-delay segundos y reintenta indefinidamente, salvo que src-delete-after le indique detenerse cuando la cola quede vacía. Esa opción es útil para migraciones puntuales y para el failback, cuando se quiere que un shovel vacíe una cola y se elimine solo.

Los shovels se combinan en topologías fan-in y fan-out. Fan-in son varios shovels, uno por clúster de origen, que publican en un mismo exchange de destino; lo usamos para concentrar eventos regionales de auditoría o facturación en un clúster central. Fan-out son varios shovels desde un mismo clúster, cada uno leyendo su propia cola de origen vinculada al mismo exchange y entregando en un destino distinto. Un solo shovel no puede hacer fan-out porque consume cada mensaje una sola vez.

rabbitmqctl set_parameter shovel orders-dr-to-west \
  '{"src-protocol":"amqp091","src-uri":"amqps://shovel:REDACTED@east-lb.example.internal:5671","src-queue":"orders.work.dr","src-prefetch-count":500,"dest-protocol":"amqp091","dest-uri":"amqps://shovel:REDACTED@west-lb.example.internal:5671","dest-queue":"orders.work.standby","ack-mode":"on-confirm","reconnect-delay":5}'

Lo que ninguno de los dos plugins ofrece: replicación síncrona

Dentro de un mismo clúster, las colas de quórum (quorum queues) replican cada mensaje en la mayoría de sus miembros mediante Raft antes de confirmarlo al publicador. Un mensaje confirmado sobrevive a la pérdida de una minoría de nodos sin brechas ni reproducciones. Eso es replicación síncrona, y es la razón por la que las colas de quórum son la opción predeterminada para cargas de trabajo durables dentro de una región.

Ni federation ni shovel hacen nada parecido. Ambos son consumidores asíncronos que operan detrás de la ruta de confirmación del primario. El publicador recibe su confirmación cuando la cola de quórum del primario hace commit; el standby recibe el mensaje un tiempo después, una vez que el enlace lo consume, lo envía a través de la WAN y el standby lo confirma. Esa brecha es su exposición. En un enlace sano suele ser de decenas de milisegundos, pero nunca es cero, y durante una caída del enlace crece hasta que este se recupera.

La distribución comercial Tanzu RabbitMQ de Broadcom incluye una función de replicación warm standby que replica el esquema y los datos de los mensajes de un clúster activo a uno pasivo, como capacidad del producto y con su propio modelo operativo. Existe, es una respuesta legítima para algunas organizaciones y no forma parte de la distribución de código abierto. No vamos a repetir sus detalles aquí porque corresponden a la documentación del fabricante, pero si su postura de cumplimiento exige una función de replicación de clúster a clúster con soporte completo, esa es la conversación que hay que tener y, como partner MSP estratégico de RabbitMQ para Broadcom, la tenemos con frecuencia.

Para todos los demás, el planteamiento honesto es este: el DR de RabbitMQ entre regiones es asíncrono, y el trabajo de diseño consiste en acotar la exposición y hacer que a la aplicación le resulte indiferente.

Tabla de decisión: cómo elegir entre federation y shovel

Rara vez se elige uno u otro para toda la plataforma. La decisión es por exchange y por cola, y depende de lo que significan los mensajes y de lo que los consumidores pueden tolerar.

CriterioA favor de exchange federationA favor de shovel
RPO esperadoSegundos, limitado por el retraso del enlace; la cola del upstream almacena durante la caídaSegundos; la cola de origen almacena durante la caída
RTO esperadoBajo; el standby ya tiene los bindings y tráfico en vivoBajo a moderado; hay que iniciar los consumidores de las colas standby
Activo-activoSí, con enlaces bidireccionales y max-hops en 1Engorroso; exige una disciplina estricta de una sola dirección por cola
Activo-pasivoSí, en una sola dirección, que se invierte en el failbackSí, es su uso natural
Consumidores en ambos sitiosObligatorios; cada sitio consume su propia copiaNormalmente consume un sitio y el otro mantiene un búfer
Orden de los mensajesFIFO por enlace en un enlace sano; no a través de reconexionesFIFO por shovel en un enlace sano; no a través de reconexiones
DuplicadosPosibles al reconectar con on-confirmPosibles al reconectar con on-confirm
Trabajo que debe ejecutarse una sola vezPoco adecuado; cada sitio recibe una copiaAdecuado; el mensaje se mueve y un solo sitio lo procesa
Difusión de eventos a muchos sitiosIdealPoco adecuado; un shovel por destino y por cola
WAN con alta latencia o pérdida de paquetesTolerante; modelo pull, reintento automático, ajuste de prefetch-countTolerante; mismo modelo de reintentos, ajuste de src-prefetch-count
Cambios de topologíaSigue los bindings automáticamenteExplícito por cola; hay que mantenerlo

Lea la tabla como valores por defecto. Los eventos a los que se suscriben muchos servicios, y que todas las regiones deben ver, van en exchanges federados. Los comandos y los jobs, en los que exactamente un worker debe actuar, van en colas que se procesan localmente o que se mueven con un shovel de forma deliberada hacia un único destino.

Cómo diseñamos RabbitMQ en varias regiones: un esquema de referencia con dos regiones

Los clientes preguntan «¿cómo se diseña RabbitMQ en varias regiones?» esperando un solo diagrama. La respuesta honesta son dos capas sobre el mismo par de clústeres: una para eventos y otra para trabajo.

Tomemos dos regiones, East como primaria y West como standby, cada una con su propio clúster de tres nodos y colas de quórum para todo lo que sea durable. Ambos clústeres tienen definiciones idénticas: exchanges, colas, bindings, políticas y usuarios, exportados desde East y aplicados en West por el pipeline de despliegue para que la deriva sea imposible. Si todavía está definiendo el esquema básico de exchanges y bindings, nuestro artículo sobre exchanges, colas y bindings para microservicios lo explica, y la guía de arquitectura de RabbitMQ en producción muestra dónde encaja esto en el panorama general.

La capa de eventos usa exchange federation en ambas direcciones. Cada topic exchange con nombre events.* está federado, West como downstream de East y East como downstream de West, con max-hops en 1. Los servicios que se suscriben a eventos se ejecutan en ambas regiones y consumen de colas locales vinculadas al exchange federado local. En operación normal, East publica casi todo, West recibe copias y sus suscriptores las procesan (modelos de lectura, cachés, índices de búsqueda), y el enlace inverso queda inactivo. Como son los bindings los que determinan qué cruza el enlace, un suscriptor que existe solo en East no arrastra su tráfico hacia West.

La capa de trabajo es donde los shovels justifican su lugar. Cada cola de comandos en East, por ejemplo orders.work, se alimenta mediante un binding desde un exchange orders.cmd. Un segundo binding enruta los mismos mensajes a orders.work.dr, una cola de quórum con un message-ttl igual al tiempo máximo que un pedido puede permanecer legítimamente sin procesar en East, normalmente de quince a treinta minutos. Un shovel dinámico con on-confirm mueve de forma continua orders.work.dr hacia orders.work.standby en West, que tiene el mismo TTL. Nadie consume orders.work.standby en operación normal: los mensajes llegan, vencen y desaparecen. La cola es una ventana continua del trabajo reciente, no un espejo del backlog del primario.

En operación normal, los consumidores de comandos se ejecutan solo en East. West tiene el despliegue listo pero escalado a cero para los consumidores de comandos, y en ejecución para los suscriptores de eventos. Los publicadores se conectan a través de un nombre DNS o una entrada de balanceador de carga global que resuelve a East.

# Applied on both clusters via the definitions pipeline
rabbitmqctl set_policy --apply-to queues dr-window "^orders\.work\.(dr|standby)$" \
  '{"message-ttl":1800000}'

Sobrevivir a una caída regional: failover y failback sin duplicados ni bucles

«¿Cómo deben sobrevivir los mensajes a una caída regional?» se divide en tres momentos: la caída, la decisión de failover y el failback.

Durante la caída, los plugins no requieren atención. El enlace de federation de West hacia East falla y reintenta cada cinco segundos. El shovel desde East no puede conectarse y reintenta. Los suscriptores de eventos de West siguen trabajando con todo lo que ya se entregó. Los mensajes publicados en East en los segundos previos a la falla que todavía no habían cruzado el enlace quedan retenidos allí hasta que East vuelva; ese es el RPO, y la capa de aplicación debe asumirlo mediante outboxes del lado del publicador o la reproducción desde el sistema de registro.

El failover es una acción deliberada, no automática. Hemos visto un failover automático entre regiones, disparado por una falsa alarma del monitoreo, crear un split-brain de consumidores que llevó un fin de semana conciliar. El runbook es breve: confirmar con sondeos independientes que East realmente no está disponible; redirigir la entrada de DNS o del balanceador de carga de los publicadores hacia West; escalar desde cero los consumidores de comandos de West; confirmar que están vaciando orders.work.standby. Todo lo que hay en esa cola con menos antigüedad que el TTL se procesa, lo que significa que el trabajo que East ya había completado en la última ventana se procesa otra vez. Es intencional. Cada consumidor de comandos lleva una clave de idempotencia, y el TTL limita cuánto trabajo duplicado puede llegar a ver el standby.

West es ahora el primario. Lo que importa es su tráfico events.*, y el enlace de federation con East como downstream lo trasladará a East cuando East vuelva. Los comandos en West llegan a orders.work y se procesan localmente, con una copia enrutada a orders.work.dr de West, lista para el shovel inverso.

El failback es donde se generan duplicados y bucles si se hace con prisa. La secuencia que usamos: levantar East sin publicadores apuntando a él y con sus consumidores de comandos en cero; dejar que el enlace de federation de West a East vacíe el backlog de eventos; crear un shovel inverso, con on-confirm, desde orders.work.dr de West hacia orders.work.standby de East; luego, en un período tranquilo, redirigir los publicadores a East, escalar los consumidores de East, reducir los de West y eliminar el shovel inverso con src-delete-after en queue-length para que se cierre cuando quede vacío. En ningún momento hay dos shovels moviendo la misma cola en direcciones opuestas, y en ningún momento se ejecutan consumidores de comandos en ambas regiones sobre la misma cola lógica.

En la capa de eventos no pueden formarse bucles porque max-hops en 1 y el header x-received-from impiden que un mensaje que cruzó un enlace vuelva a cruzarlo. En la capa de trabajo solo pueden formarse si alguien hace shovel hacia un exchange cuyos bindings alimentan la propia cola de origen del shovel. La regla: hacer shovel hacia colas de destino con nombre, nunca hacia el exchange que alimentó el origen.

Simulacros de falla antes de salir a producción

Un diseño de DR que nunca se puso a prueba es una hipótesis. Hacemos estos simulacros con los clientes antes del primer pase a producción y luego cada trimestre.

Bloquee en el firewall el puerto WAN entre los clústeres durante treinta minutos y observe cómo crecen la cola de federation del lado del upstream y orders.work.dr. Confirme que el message-ttl y el expires definidos realmente limitan el crecimiento y que ninguno de los clústeres se acerca a su umbral de alarma de disco. Restablezca el enlace y mida cuánto tarda en vaciarse el backlog con su configuración real de prefetch.

Publique una cantidad conocida de mensajes numerados mientras el enlace está caído, restablézcalo y cuente lo que llegó. Este es el simulacro que detecta los shovels con no-ack y los enlaces con on-publish que alguien configuró «por rendimiento».

Reinicie el nodo dueño del enlace de federation y el nodo dueño del shovel, por separado, y confirme que ambos se restablecen en otro nodo. Revise rabbitmqctl federation_status y rabbitmqctl shovel_status después de cada reinicio, en lugar de echar un vistazo a la UI de management.

Provoque una alarma de memoria en el standby llenando una cola a propósito. Un enlace de federation publica en el downstream, así que una alarma en el downstream bloquea el enlace igual que bloquea a cualquier otro publicador, y la cola del upstream empieza a crecer. Confirme que sus alertas detectan el enlace bloqueado, no solo la alarma.

Ejecute el runbook completo de failover contra el standby con consumidores reales y tráfico sintético, y luego el failback completo. Cuente los duplicados procesados en cada fase y confirme que la capa de idempotencia los descartó todos. Cronometre ambos procedimientos y anote los números en el runbook, porque esas son sus cifras reales de RTO.

Rote las credenciales de las URI del upstream y del shovel y confirme que los enlaces se reconectan. Descubrir credenciales de federation vencidas durante una caída real es un modo de falla que hemos visto más de una vez.

Errores que vemos en producción

El error más común es tratar federation como replicación y descubrir durante un incidente que el standby no tiene nada del backlog sin consumir del primario. La solución es arquitectónica: el trabajo que debe sobrevivir necesita el patrón de cola de búfer de DR más shovel, o un outbox a nivel de aplicación.

Muy cerca le sigue una definición de upstream sin message-ttl ni expires. La cola interna de federation en el upstream es durable y crece durante una caída larga del enlace hasta que el upstream llega a una alarma de disco y deja de aceptar publicaciones de todos, lo que convierte un problema del standby en una caída del primario.

Shovels configurados con no-ack u on-publish porque un benchmark mostró mayor throughput. El throughput es real, y la pérdida también. Si un shovel necesita ir más rápido, aumente src-prefetch-count y mantenga on-confirm.

Shovels bidireccionales sobre la misma cola, normalmente creados durante un failback apresurado y nunca eliminados. Se pasan los mismos mensajes de un lado a otro hasta que alguien mira los contadores.

Un único hostname en la URI del upstream. Cuando ese es justamente el nodo que falló, el enlace del standby no tiene adónde ir aunque el resto del clúster primario esté sano. Indique una lista de URI o la dirección de un balanceador de carga que haga health checks de los nodos.

Deriva de definiciones entre regiones. Una cola que existe en East pero no en West deja al shovel en un bucle de reintentos o, peor aún, publicando en un exchange sin bindings donde los mensajes se descartan. Exporte las definiciones del primario y aplíquelas al standby en el mismo pipeline que despliega la aplicación.

Falta de monitoreo del estado de los enlaces. Nadie mira la UI de management a las tres de la mañana. Exporte federation_status y shovel_status a su pipeline de métricas y genere alertas para cualquier enlace que no esté en running durante más tiempo que el reconnect delay.

Por último, los TTL de DNS y los pools de conexiones que mantienen a los publicadores atados a la región caída mucho después de que cambió el registro. Las bibliotecas cliente se reconectan a la dirección que resolvieron al iniciar salvo que se les indique otra cosa, así que el runbook de failover debe incluir un reinicio de los clientes, o los clientes deben configurarse con los endpoints de ambas regiones.

Próximos pasos

Este artículo se limitó deliberadamente a lo que circula entre clústeres. El tamaño de cada clúster, cómo distribuir los nodos entre zonas de disponibilidad y qué configuración usar en las colas de quórum se tratan en nuestra guía de dimensionamiento de clústeres de RabbitMQ para alta disponibilidad y DR. La topología de mensajería sobre la que se apoyan las capas de federation y shovel se describe en exchanges, colas y bindings para microservicios, y la estructura de punta a punta de un despliegue empresarial está en la guía de arquitectura de RabbitMQ en producción.

Si ejecuta RabbitMQ 3.8.x a 4.x en producción y quiere una segunda región en la que realmente se hayan probado el failover y el failback, y no solo dibujada en una pizarra, el soporte de RabbitMQ de AceMQ le ofrece objetivos de respuesta desde 15 minutos, según el plan por parte de ingenieros que ya lo han hecho, y nuestros proyectos de consultoría de RabbitMQ diseñan, construyen y ponen a prueba la configuración con su equipo antes de que tenga que funcionar de verdad.

Para ver dónde encaja esta decisión en el diseño completo (separar alta disponibilidad de DR, respaldo de definiciones, objetivos de recuperación y la prueba de failover), consulte la guía de recuperación ante desastres de RabbitMQ.

Preguntas frecuentes

¿Federation o Shovel en RabbitMQ para recuperación ante desastres?

Use exchange federation para el tráfico de eventos que todas las regiones deben ver, porque sigue los bindings automáticamente, tolera las caídas del enlace con un búfer del lado del upstream y admite enlaces bidireccionales de forma segura con max-hops en 1. Use shovels dinámicos con on-confirm para las colas de trabajo en las que exactamente una región debe procesar cada mensaje, porque un shovel mueve los mensajes a un destino con nombre en lugar de copiarlos. La mayoría de los diseños de DR en producción usan ambos: federation para la capa de eventos y shovels para un búfer de DR continuo con los comandos recientes. Ninguno de los dos es replicación, así que combínelos con consumidores idempotentes y un outbox del lado del publicador.

¿RabbitMQ Federation sirve para la recuperación ante desastres?

Sirve para diseños de DR que aceptan una entrega asíncrona y una ventana acotada de pérdida o duplicación. Federation mantiene una región en standby alimentada de forma continua con los eventos para los que tiene bindings, almacena en búfer del lado del upstream durante una caída del enlace y restablece los enlaces automáticamente. No copia los backlogs de colas sin consumir, no replica de forma síncrona y no funciona como espejo. Si su requisito es que el standby contenga exactamente lo que tenía el primario en el instante de la falla, la federation de código abierto no puede cumplirlo y debería evaluar la función comercial de replicación warm standby o un outbox a nivel de aplicación.

¿Cómo se diseña RabbitMQ en varias regiones?

Ejecute un clúster independiente por región con definiciones idénticas desplegadas desde un mismo pipeline. Federe los exchanges de eventos en ambas direcciones con max-hops en 1 para que los suscriptores de cada región consuman copias locales. Para las colas de trabajo, agregue en el primario una cola de copia para DR con un TTL de mensaje equivalente a su ventana aceptable de reprocesamiento y muévala con un shovel con on-confirm hacia una cola standby que nadie consume hasta el failover. Mantenga los consumidores de comandos en una sola región a la vez, dirija a los publicadores a través de una entrada de DNS o de balanceador de carga conmutable y haga del failover un paso deliberado del runbook en lugar de un disparador automático.

¿Cómo deben sobrevivir los mensajes a una caída regional?

Los mensajes sobreviven porque quedan en búfer del lado del enlace roto en el que se encuentran y se entregan cuando el enlace vuelve. Federation almacena en una cola del lado del upstream acotada por message-ttl y expires; un shovel almacena en su cola de origen. Los mensajes que el primario confirmó en el instante previo a la falla pero que todavía no se habían enviado constituyen el RPO residual, y solo un outbox del lado del publicador o una reproducción desde el sistema de registro cierra esa brecha. Los consumidores deben ser idempotentes, porque ambos plugins entregan al menos una vez a través de una reconexión y el failover reprocesa deliberadamente la ventana de DR.

¿De verdad importa el ack mode del shovel para la recuperación ante desastres?

Es el parámetro que decide si un shovel puede perder mensajes. Con on-confirm, el mensaje de origen se confirma (ack) solo después de que el destino lo confirma, así que una falla produce, en el peor de los casos, un duplicado. Con on-publish, el ack en el origen ocurre antes de la confirmación del destino, así que una falla del destino en ese instante pierde el mensaje. Con no-ack, todo lo que está en el búfer de prefetch del shovel se pierde ante cualquier falla. El tráfico de DR siempre debería usar on-confirm; si el throughput preocupa, aumente el prefetch count del origen en lugar de debilitar el modo de acknowledgement.

¿Puede RabbitMQ replicar una cola de forma síncrona a otra región?

No con los plugins de código abierto federation o shovel, que son consumidores asíncronos que operan detrás de la ruta de confirmación del primario. En RabbitMQ, la replicación síncrona es una propiedad de las colas de quórum dentro de un clúster: hacen commit en la mayoría de los miembros antes de confirmar. Extender un único clúster entre regiones para obtener ese comportamiento no está soportado y rinde mal con la latencia de una WAN. La distribución comercial Tanzu RabbitMQ ofrece una función de replicación warm standby de clúster a clúster; para todo lo demás, trate el DR entre regiones como asíncrono y diseñe la aplicación para tolerar la ventana resultante.

Scott Sternloff

Autor

Scott SternloffArquitecto empresarial sénior

Arquitecto empresarial sénior en AceMQ. Escribe aquí los contenidos técnicos: arquitectura, clustering y migraciones de RabbitMQ, Kafka y Redis.

Talk to an engineer

Need a hand with RabbitMQ?

Senior engineers who run it in production. Get a quote or a free consultation, no sales pitch.

Consulta gratuita

Que un experto revise su clúster de RabbitMQ

Ya sea que esté resolviendo un incidente en producción, planificando una migración o quiera una segunda opinión sobre su arquitectura, nuestro equipo está listo. Sin discursos de venta, solo respuestas.

Escríbanos