¿Qué son los servicios gestionados de Kafka?
Los servicios gestionados de Kafka consisten en que otro opere sus clústeres de Apache Kafka: monitorización, guardias, aplicación de parches, actualizaciones, capacidad y respuesta a incidentes. Un servicio alojado como Amazon MSK, Confluent Cloud o Aiven ejecuta Kafka en la cuenta del proveedor y le deja a usted el diseño de topics, los clientes y Connect. AceMQ ofrece dos modelos. Operamos Kafka en su propia infraestructura, de modo que los datos y la cuenta siguen siendo suyos, o alojamos un clúster dedicado en la nuestra. En ambos, un especialista en Kafka se responsabiliza de toda la plataforma, clientes y Connect incluidos.
¿En qué se diferencia de Amazon MSK o Confluent Cloud?
Amazon Managed Streaming for Apache Kafka (Amazon MSK) ofrece Apache Kafka totalmente gestionado en clústeres MSK Provisioned o MSK Serverless, con Amazon MSK Connect para conectores y MSK Replicator para la replicación a un clúster de otra región. Confluent Cloud ofrece un servicio de Kafka totalmente gestionado en las principales nubes. Ambos alojan Kafka en el entorno del proveedor y gestionan la infraestructura de los brokers; el diseño de topics, los clientes, los conectores y la mayoría de las causas de incidentes siguen siendo cosa suya. AceMQ opera Kafka donde ya se ejecuta, en su cuenta, o aloja un clúster dedicado para usted en la infraestructura de AceMQ, y en ambos casos asume la responsabilidad de toda la plataforma, incluidos los clientes y Connect. Los equipos eligen esta opción cuando importan la residencia de datos, el control de versiones, un ingeniero asignado o evitar la dependencia del proveedor (vendor lock-in). Las ventajas e inconvenientes se comparan en Comparativa de opciones de Kafka gestionado.
¿En qué se diferencia Kafka gestionado del soporte de Kafka de AceMQ?
El soporte es un SLA sobre un clúster que opera su equipo: ustedes están de guardia y nos llaman cuando algo falla. Los servicios gestionados significan que lo operamos nosotros: la monitorización, los parches, las actualizaciones, la capacidad y las guardias son responsabilidad nuestra. Las organizaciones con un equipo de plataforma solvente suelen optar por el soporte (fases 1 y 2); las que quieren que Kafka deje de ser su problema optan por los servicios gestionados (fases 3 y 4).
¿Cuáles son las cuatro fases de externalización de la operación de Kafka?
La fase 1 es soporte reactivo: usted opera Kafka y abre tickets a un especialista con un SLA. La fase 2 es soporte proactivo: usted sigue operando y siendo propietario del clúster, y AceMQ añade monitorización y alertas mediante su plataforma de observabilidad para que los problemas afloren pronto. La fase 3 es Kafka gestionado en su infraestructura: AceMQ opera el clúster en su cuenta y asume las guardias. La fase 4 es Kafka gestionado en la infraestructura de AceMQ: AceMQ aloja y opera un clúster dedicado para usted. Las guardias cambian de manos en la fase 3.
¿Puede AceMQ alojar nuestro Kafka?
Sí. En la fase 4, AceMQ aloja y opera un clúster de Kafka dedicado en su propia infraestructura, de modo que usted recibe endpoints de bootstrap sin tener que gestionar una cuenta en la nube, un clúster de Kubernetes ni turnos de guardia. La monitorización, los parches, las actualizaciones, la capacidad y la respuesta a incidentes son los mismos que cuando operamos Kafka en su cuenta, con la misma respuesta de emergencia. Si las normas de cumplimiento normativo o de residencia de datos exigen que el clúster permanezca en su cuenta, lo operamos allí en la fase 3.
¿Qué debo buscar en un proveedor de servicios gestionados de Kafka?
Cuatro cosas. Dónde se ejecuta el clúster y si puede elegir entre su cuenta y la del proveedor. Si el proveedor se responsabiliza de los clientes, Kafka Connect, Schema Registry y MirrorMaker 2 además de los brokers, ya que ahí empiezan muchos incidentes. Quién está de guardia y con qué rapidez responde un ingeniero sénior. Y cómo es la salida: runbooks y documentación de la topología que sean suyos, no una reconstrucción. AceMQ es un proveedor de servicios gestionados de Kafka que ofrece ambos modelos de alojamiento y deja esas cuatro respuestas por escrito.
¿Pueden asumir un clúster existente de Kafka, Strimzi o Confluent Platform?
Sí. La mayoría de los entornos que asumimos son heredados. Empezamos con una evaluación de la versión y el estado de parches, la topología, la distribución de particiones y replicación, los grupos de consumidores (consumer groups), Connect y las carencias de monitorización; corregimos los riesgos activos y solo entonces asumimos las guardias.
¿Se encargan de la migración de ZooKeeper a KRaft?
Sí. KRaft (Kafka Raft) guarda los metadatos del clúster en un quórum de controllers de Kafka en lugar de en un ensemble independiente de Apache ZooKeeper, de modo que hay un único sistema que proteger, monitorizar y actualizar. Apache Kafka 4.x eliminó ZooKeeper, así que todo clúster basado en ZooKeeper necesita una migración a KRaft antes de pasar a 4.x. La planificamos y ejecutamos, incluido el diseño del quórum de controllers, las fases de migración y los requisitos de versión, dentro de sus ventanas de cambio.
¿Qué ocurre con las versiones de Kafka que el proyecto Apache ya no mantiene?
Siguen cubiertas mientras planifica la actualización. El proyecto Apache solo corrige errores en sus versiones más recientes. Para los parches de seguridad en líneas antiguas, la plataforma OSSeva de AceMQ hace backport de las correcciones de CVE a Apache Kafka 2.8.x hasta 3.7.x.
¿Con qué rapidez responden cuando algo falla?
Las emergencias, como brokers caídos, particiones offline o un grupo de consumidores que no logra estabilizarse, se atienden con objetivos de respuesta desde 15 minutos, según el plan, por parte de un ingeniero sénior, 24/7. Como ya operamos la plataforma, la mayoría de esos incidentes los detecta nuestra monitorización antes de que su equipo se dé cuenta.
Kafka gestionado o Kafka autogestionado: ¿qué nos conviene?
Kafka autogestionado le da control total sobre versiones, configuración, residencia de datos y costes, pero su equipo carga con las guardias y las actualizaciones. Un servicio gestionado alojado como Amazon MSK, MSK Serverless o Confluent Cloud elimina la operación de los brokers, pero traslada el clúster a una cuenta del proveedor y le sigue dejando el diseño de topics, los clientes y Kafka Connect. Un servicio gestionado operado mantiene el control de Kafka autogestionado y cede la operación a un especialista, y un clúster dedicado alojado por AceMQ cede también la infraestructura. Las preguntas decisivas son dónde deben residir los datos, quién debe estar de guardia y lo predecible que es la carga de streaming.
¿Pueden ofrecer Kafka gestionado en Google Cloud o Azure?
Sí. Operamos Apache Kafka en su propio proyecto de Google Cloud, suscripción de Azure o cuenta de AWS, en máquinas virtuales o Kubernetes, y on-premise. Las alternativas alojadas son Google Cloud Managed Service for Apache Kafka y Confluent Cloud en Google Cloud, y Amazon MSK en AWS. Ayudamos a los equipos a compararlas con ejecutar Kafka en su propia cuenta o en un clúster dedicado alojado por AceMQ, y damos soporte a clústeres en cualquiera de ellas.
¿Para qué cargas de trabajo se usa Kafka gestionado?
Las mismas cargas de streaming en tiempo real para las que se usa Kafka en cualquier parte: microservicios orientados a eventos, CDC (captura de datos de cambios) hacia una plataforma de datos, pipelines de logs y métricas, streams de pagos y pedidos, telemetría de IoT y alimentación del procesamiento de streams en Kafka Streams o Flink. La operación gestionada importa sobre todo cuando el stream es crítico para el negocio y el equipo que desarrolla sobre él no debería tener que operarlo también.
¿Podemos trabajar con AceMQ en Kafka sin un contrato a largo plazo?
Sí. AceMQ trabaja en Kafka de dos formas: proyectos puntuales para un trabajo concreto, como un health check, una actualización o un incidente, o una colaboración anual que incluye soporte 24/7, revisiones proactivas e ingenieros asignados. Muchos equipos empiezan con un proyecto puntual y pasan a una colaboración anual una vez terminado el primero.
¿Cuánto cuestan los servicios gestionados de Kafka?
El Kafka gestionado se presupuesta según el alcance, sin precio de catálogo: el precio depende del número de entornos y nodos, del SLA, de si AceMQ opera Kafka en su infraestructura (Nivel 3) o en la nuestra (Nivel 4) y del proceso de acceso y de cambios que necesite. Solicite presupuesto y AceMQ le responderá en menos de 1 hora.