Preparación para KRaft
Modo del clúster, versión de metadatos y diseño del quórum de controladores, además del inventario de clientes, workers de Connect, JVM y herramientas de los que depende el paso a Kafka 4.x.
Health check de Kafka
Un health check de Kafka es una revisión realizada por ingenieros de un clúster en funcionamiento, contrastada con el uso real que se hace de él: preparación para KRaft, configuración de brokers y controladores, replicación e ISR, sesgo (skew) de particiones, lag de los consumidores, seguridad, retención y la monitorización que debería haber detectado el último incidente. Recibe un informe por escrito, una lista de correcciones priorizada y el razonamiento detrás de cada hallazgo.
Clientes




Partners


¿Es su caso?
Ejecuta Kafka basado en ZooKeeper y el paso a 4.x no se ha dimensionado
El lag de los consumidores se dispara en los picos y nadie se pone de acuerdo en si la culpa es de los brokers, las particiones o los clientes
Quienes montaron el clúster ya no están y el diagrama de topología está desactualizado
Una auditoría o un cuestionario de seguridad pregunta por las ACL, TLS y la autenticación en los brokers
El tráfico va a crecer: un lanzamiento, un nuevo pipeline de datos, un despliegue de CDC (captura de datos de cambios)
Ha superado un incidente sin entenderlo, y podría repetirse
Está eligiendo entre soporte, Kafka gestionado y una actualización, y quiere conocer los hechos antes de firmar el contrato
Resultados
Cambios concretos de estado, no recuento de entregables. Esto es lo que realmente cambia en su entorno de Kafka al cerrar el proyecto.
Antes
Nadie sabe qué versión de Kafka, qué modo ni qué bibliotecas cliente se están usando, ni a qué afectaría una actualización a 4.x.
Un inventario por escrito por broker, controlador y grupo de clientes, con la ruta hacia KRaft y el orden de las operaciones detallados.
Antes
La replicación y la durabilidad se configuraron en la puesta en producción. El negocio da por hecho que no habrá pérdida de datos, y nadie ha comprobado que la configuración lo garantice.
Cada clase de topic revisada frente a la pérdida y la disponibilidad que espera el negocio, con las carencias enumeradas y valoradas en coste.
Antes
El lag, los rebalanceos y las particiones calientes aparecen como incidentes, y cada uno se trata como un caso aislado.
Identificamos las causas estructurales: número de particiones, sesgo de claves, configuración de los consumidores y capacidad, cada una con su corrección y su responsable.
Antes
El equipo sabe que el clúster es frágil, pero no puede priorizar los riesgos ni dimensionar el trabajo.
Un plan priorizado en tres bloques: cambiar ya, cambiar antes del próximo salto de crecimiento y correcto tal como está.
Alcance
Modo del clúster, versión de metadatos y diseño del quórum de controladores, además del inventario de clientes, workers de Connect, JVM y herramientas de los que depende el paso a Kafka 4.x.
Listeners, directorios de logs, heap y caché de páginas, cuotas y configuración de hilos, analizados en función del hardware y la carga de trabajo, con cada valor no predeterminado explicado o señalado.
Factor de replicación, min.insync.replicas y acks del productor revisados en conjunto, además de la elección de líder no limpia (unclean), el reconocimiento de rack o zona y la frecuencia real con la que se reduce el ISR.
Número de particiones por topic, distribución de claves, equilibrio de líderes entre brokers y topics sin propietario. Las particiones calientes parecen un problema de Kafka y suelen ser un problema de diseño.
Patrones de lag a lo largo del tiempo en lugar de una lectura puntual, frecuencia de rebalanceos, configuración de sesión y poll, y qué grupos de consumidores (consumer groups) no dan abasto con su topic.
Configuración del authorizer, cobertura de ACL y permisos con comodines, TLS en los listeners de clientes y entre brokers, mecanismo SASL, superusuarios y dónde se guardan las credenciales.
Retención y compactación por topic frente al crecimiento, margen en los directorios de logs y cuánto tardaría en reconstruirse un broker tras un fallo de disco.
Idempotencia del productor, acks, reintentos y batching, estrategia de commit de los consumidores y versiones de las bibliotecas en uso. La mayoría de los incidentes de Kafka empiezan en el lado del cliente.
Si se miden y generan avisos las particiones con replicación insuficiente y offline, la rotación del ISR, la salud del controlador, la latencia de las peticiones, el disco y el lag de los consumidores, y qué habría detectado el último incidente.
El proyecto
Cada fase tiene una duración definida y un entregable concreto al final. Siempre sabe en qué fase está y qué ha recibido.
Acordamos qué clústeres entran en el alcance, las versiones de Kafka y el modelo de despliegue (autogestionado, Strimzi, Amazon MSK, Confluent), y las exportaciones de solo lectura que necesitamos. El trabajo se realiza en remoto, guiado por sus ingenieros mediante pantalla compartida. No accedemos a su entorno ni a su código.
Usted recibe
Un ingeniero sénior de Kafka analiza las nueve áreas del alcance a partir de sus exportaciones y métricas, con su equipo presente cuando una decisión requiere contexto. Los hallazgos se contrastan con el lag de los consumidores y el histórico de replicación reales, no con una checklist genérica.
Usted recibe
El informe, ordenado según lo que probablemente fallará primero y en qué condiciones. Cada hallazgo incluye la corrección, el esfuerzo necesario y el riesgo de no abordarlo.
Usted recibe
Una presentación de resultados con el ingeniero que hizo el trabajo y, después, un plan secuenciado que su equipo puede ejecutar o confiarnos. La corrección se presupuesta aparte, de modo que el informe es útil la haga quien la haga.
Usted recibe
AceMQ. Un ingeniero sĂ©nior de Kafka revisa su clĂșster en funcionamiento (autogestionado, Strimzi, Amazon MSK o Confluent Platform) contrastĂĄndolo con el uso real que se hace de Ă©l. Recibe un informe por escrito con una lista de correcciones ordenada por prioridad, que le presenta el propio ingeniero que ha realizado la revisiĂłn. AceMQ responde a las solicitudes de presupuesto en menos de 1 hora.
Un informe por escrito con un inventario por broker, controlador y grupo de clientes, hallazgos con evidencias, notas sobre KRaft y la ruta de actualizaciĂłn, y una lista de correcciones priorizada en tres bloques: cambiar ya, cambiar antes del prĂłximo salto de crecimiento y correcto tal como estĂĄ. La correcciĂłn se dimensiona y se presupuesta aparte, de modo que el informe resulta Ăștil con independencia de quiĂ©n ejecute el trabajo.
Exportaciones de solo lectura (configuraciĂłn de brokers y topics, estado de los grupos de consumidores, histĂłrico de mĂ©tricas), entregadas en remoto mediante pantalla compartida. No se toma ningĂșn acceso a su entorno.
Apache Kafka 4.0, publicado el 18 de marzo de 2025, solo admite el modo KRaft. El modo ZooKeeper se ha eliminado, y un clĂșster basado en ZooKeeper debe migrarse a KRaft antes de poder actualizarse a 4.0.x. Una evaluaciĂłn de preparaciĂłn para KRaft responde a una Ășnica pregunta: quĂ© separa a este clĂșster de una versiĂłn 4.x compatible.
| Área | QuĂ© exige Apache Kafka 4.0 | Qué comprobamos |
|---|---|---|
| Modo del clĂșster | Solo KRaft. Los clĂșsteres con ZooKeeper deben migrar a KRaft antes de actualizarse a 4.0.x. | Modo actual, versiĂłn de metadatos, distribuciĂłn de los controladores y si ya hay una migraciĂłn en curso. |
| Clientes | Los clientes, incluidos Kafka Streams y Connect, deben estar en la versiĂłn 2.1 o superior. | Bibliotecas cliente por aplicaciĂłn y por worker de Connect, y cuĂĄles de ellas son anteriores a la 2.1. |
| Java | Los brokers, Connect y las herramientas requieren Java 17. Los clientes y Kafka Streams requieren Java 11. | Versiones de JVM en todo el parque y aplicaciones que necesitarían cambiar primero de entorno de ejecución (runtime). |
| Controladores | Los metadatos del clĂșster residen en un quĂłrum de controladores de Kafka en lugar de en un ensemble de ZooKeeper. | NĂșmero y ubicaciĂłn de los controladores, roles dedicados o combinados, y disco para el log de metadatos. |
| Operaciones | Todo lo que se comunicaba con ZooKeeper tiene que cambiar. | Runbooks, automatizaciĂłn y monitorizaciĂłn que leen de ZooKeeper, y el authorizer de ACL en uso. |
Una regla que mantenemos
Nunca combine una migraciĂłn de plataforma con una actualizaciĂłn de versiĂłn en la misma ventana de producciĂłn. El health check ordena en secuencia el paso a KRaft, la actualizaciĂłn de versiĂłn y cualquier cambio en los clientes como cambios independientes.
El informe estĂĄ pensado para que lo lean tanto el ingeniero que opera el clĂșster como el responsable que financia las correcciones. Esta es la estructura que sigue cada informe. Es una estructura, no un documento de cliente, y no contiene datos de clientes.
| Sección | Contenido |
|---|---|
| 1. Resumen | Los hallazgos con más probabilidad de provocar una caída o una pérdida de datos, en lenguaje claro y con una calificación de riesgo para cada uno. |
| 2. Inventario | Brokers, controladores, versiones de Kafka y Java, sistema operativo, discos, listeners, workers de Connect y grupos de clientes. |
| 3. Registro de hallazgos | Una fila por hallazgo: severidad, evidencia, por qué importa, la corrección, el esfuerzo y el riesgo de esperar. |
| 4. KRaft y ruta de actualizaciĂłn | PreparaciĂłn frente a Kafka 4.0, elementos bloqueantes y orden de las operaciones. |
| 5. Carencias de monitorización | Qué se mide y qué genera alertas hoy, qué falta y umbrales sugeridos. |
| 6. Plan de corrección | Tres bloques: cambiar ya, cambiar antes del próximo salto de crecimiento y correcto tal como está. |
| 7. Anexo | Exportaciones de configuración y comprobaciones realizadas, para que un segundo ingeniero pueda verificar cualquier hallazgo. |
Un informe con cien observaciones sin jerarquizar no ha hecho la parte difícil, que es priorizarlas. El nuestro sitúa primero los pocos hallazgos importantes y deja el resto para el anexo.
Éxito de clientes
Vea por qué las empresas confían en AceMQ para sus cargas de trabajo de Kafka más críticas.
Proveedor europeo de hosting
Un clúster de Kafka de cinco nodos que daba servicio a 60.000 clientes provocaba timeouts en los productores bajo carga. La causa era la topología, no la capacidad.
Plataforma de transacciones bancarias
El throughput cayó de 320.000 a unas 45.000 transacciones por hora tras introducir Kafka. La plataforma necesitaba 80.000 para demostrar que podía escalar.
Fabricante global de automoción
Sustitución de una ingesta frágil basada en triggers de SQL por una arquitectura orientada a eventos fiable para el movimiento de datos de planta y operaciones de baja latencia.
Plataforma europea de trading online
Revisión independiente de la arquitectura y el rendimiento de RabbitMQ, Kafka y Redis para una plataforma de trading online.
American National Insurance
American National Insurance optó por una arquitectura de Debezium autónomo + RabbitMQ para el CDC (captura de datos de cambios) de SQL Server tras considerar que Kafka era demasiado complejo de operar para esta tarea, con una operación ligera y un enrutamiento flexible.
Gran empresa tecnológica global
AceMQ desarrolló una estrategia de cumplimiento multitecnología que abarcaba el parcheo de CVE de Kafka junto con los despliegues de RabbitMQ e IBM MQ, y creó un enfoque unificado de gestión de vulnerabilidades para toda la pila de mensajería empresarial.
Proveedor global de pagos (tecnología financiera)
AceMQ prestó soporte continuo a la infraestructura de pagos de alto rendimiento de un proveedor global de pagos, que ejecuta Kafka y RabbitMQ con altos volúmenes de transacciones, incluida la validación mediante pruebas de carga y la optimización de la arquitectura.
Grandes empresas
El servicio de evaluación de Kafka de AceMQ analiza la salud de la arquitectura de streaming, identifica riesgos operativos y ofrece una hoja de ruta estructurada de migración o modernización a las empresas que utilizan Kafka o están valorando hacerlo.
Preguntas frecuentes
Un health check de Kafka incluye nueve ĂĄreas: configuraciĂłn de brokers y controladores, replicaciĂłn e ISR, distribuciĂłn de particiones y sesgo, lag de los consumidores y rebalanceos, seguridad, retenciĂłn, configuraciĂłn de los clientes, carencias de monitorizaciĂłn y preparaciĂłn para KRaft. Termina en un informe por escrito con las evidencias de cada hallazgo y una lista de correcciones priorizada. Revisa el clĂșster en funcionamiento a partir del histĂłrico real de lag y replicaciĂłn, no de una lista de comprobaciĂłn genĂ©rica.
La optimizaciĂłn del rendimiento de Kafka abarca los ajustes y las decisiones de diseño que limitan el throughput y la latencia: nĂșmero de particiones y claves, batching y acks del productor, configuraciĂłn de poll y commit de los consumidores, hilos de los brokers, margen de disco y red, y retenciĂłn. Un health check detecta dĂłnde mirar; la optimizaciĂłn cambia cosas para corregirlo y se dimensiona como un trabajo aparte. Se presupuesta segĂșn el nĂșmero de clĂșsteres y la profundidad, no por broker. EnvĂenos los datos de su clĂșster y le responderemos con el presupuesto en menos de 1 hora.
Un health check de Kafka es una revisiĂłn estructurada de un clĂșster en funcionamiento, contrastada con el uso real que se hace de Ă©l. Abarca la preparaciĂłn para KRaft, la configuraciĂłn de brokers y controladores, la replicaciĂłn y el ISR, el sesgo de particiones, el lag de los consumidores, las ACL, TLS y SASL, la retenciĂłn y el disco, la configuraciĂłn de los clientes y las carencias de monitorizaciĂłn, y termina en una lista ordenada de lo que va a fallar primero y cĂłmo corregirlo.
En la prĂĄctica se solapan. Un health check, una auditorĂa del clĂșster de Kafka y una revisiĂłn del clĂșster examinan el clĂșster en funcionamiento y su configuraciĂłn. Una revisiĂłn de arquitectura de Kafka tiene un alcance mĂĄs amplio: analiza cĂłmo encajan los topics, los productores, los consumidores y los pipelines de Connect con el problema de negocio. Ajustamos el alcance del trabajo a la pregunta que usted se plantea y se lo indicamos desde el principio.
De una a cuatro semanas desde el arranque hasta la presentaciĂłn de resultados, segĂșn la complejidad del entorno, las ĂĄreas que quiera cubrir y cuĂĄntos problemas encontremos por el camino. La recogida de informaciĂłn lleva un dĂa, y el informe de hallazgos por escrito llega en la semana posterior a la revisiĂłn. Los entornos con varios clĂșsteres o con una topologĂa que depende mucho de Connect se sitĂșan en el extremo mĂĄs largo, y confirmamos el plazo una vez que conocemos el nĂșmero de clĂșsteres y las ĂĄreas de interĂ©s.
No. Necesitamos visibilidad, no acceso operativo. La configuración de brokers y topics, el estado de los grupos de consumidores, la distribución de particiones y réplicas y el histórico de métricas pueden exportarse y revisarse. El acceso de solo lectura agiliza el trabajo, y en entornos regulados suele bastar una exportación de la configuración mås una sesión de trabajo con sus operadores.
Incluye la preparaciĂłn: si el clĂșster, los clientes, las versiones de Java y las herramientas pueden pasar a Kafka 4.x, y en quĂ© orden. Apache Kafka 4.0 solo admite el modo KRaft, por lo que un clĂșster basado en ZooKeeper debe migrar antes de poder actualizarse. La migraciĂłn en sĂ es un trabajo aparte, descrito en nuestra guĂa de migraciĂłn de ZooKeeper a KRaft.
La monitorizaciĂłn informa de lo que estĂĄ ocurriendo ahora. Un health check le indica quĂ© ocurrirĂĄ en condiciones que todavĂa no ha experimentado. El soporte es un SLA sobre un clĂșster que gestiona su equipo, con objetivos de respuesta desde 15 minutos, segĂșn el plan. El health check es un proyecto independiente y tambiĂ©n el primer paso cuando un clĂșster pasa a soporte o a servicios gestionados, de modo que el trabajo no se repite.
Se dimensiona segĂșn el nĂșmero de clĂșsteres y la profundidad de la revisiĂłn, no por broker ni por topic. EnvĂenos el nĂșmero de clĂșsteres y su modelo de despliegue, y le responderemos en menos de 1 hora y a continuaciĂłn le enviaremos un presupuesto por escrito.
Hablemos
Indíquenos cuántos clústeres opera y en qué versión de Kafka están. Definiremos el alcance de la revisión, le responderemos en menos de 1 hora y después le enviaremos un calendario y un presupuesto por escrito.
Envíenos un mensaje y le responderemos en menos de 1 hora, o reserve directamente una consulta gratuita de 30 minutos.
305-204-2607info@acemq.com¿Prefiere hablar ahora? Llámenos directamente o utilice la pestaña de consulta para encontrar un horario que le venga bien.