Descripción general
Un proveedor de servicios de seguros combina agentes del fabricante con instrumentación de OpenTelemetry. Las trazas terminaban a menudo en la frontera entre ambos. AceMQ presta soporte continuo para que la propagación siga funcionando a medida que cambian los servicios.
Reto
Cada servicio propagaba el contexto con un formato de cabecera distinto, y los servicios a cada lado de una frontera estaban configurados para aceptar solo uno. Cuando una petición pasaba de un servicio con el agente del fabricante a uno con OpenTelemetry, el contexto entrante se ignoraba y empezaba una traza nueva. Los saltos asíncronos a través del broker de mensajería perdían el contexto por completo porque nada lo inyectaba en las cabeceras de los mensajes. Cada servicio nuevo que se incorporaba al parque volvía a introducir el problema en otro punto.
Entorno
Parque híbrido con servicios Java y .NET, instrumentación mixta de agentes del fabricante y OpenTelemetry e integración entre capas basada en mensajes.
Enfoque
El soporte cubre la instrumentación que es propiedad del cliente, no la plataforma de ingesta del fabricante. Estandarizamos un único formato de propagación aceptado en todas partes, hicimos que la inyección de contexto en los saltos de mensajería formara parte de la biblioteca compartida en lugar de ser responsabilidad de cada equipo y añadimos una comprobación sintética de traza de extremo a extremo que falla cuando se rompe la propagación.
Solución
- Soporte 24/7 con objetivos de respuesta desde 15 minutos, según el plan, e ingenieros sénior asignados que conocen la topología de trazas del parque
- Un único formato de propagación estandarizado entre los servicios con agente del fabricante y los de OpenTelemetry, aceptando ambos durante la transición
- Inyección y extracción de contexto en el broker de mensajería trasladadas a una biblioteca compartida para que los saltos asíncronos propaguen por defecto
- Transacción sintética de extremo a extremo en ejecución continua que alerta cuando una traza no cubre toda la ruta
- Conciliación de la configuración de muestreo entre servicios para que las decisiones aguas arriba y aguas abajo coincidan
- Revisión de la instrumentación incorporada a la lista de comprobación de nuevos servicios del cliente, para que cada incorporación llegue ya correcta
Resultado final
Las trazas cubren ahora toda la ruta de la petición, incluidos los saltos asíncronos, y la comprobación sintética detecta las regresiones de propagación a los pocos minutos de un despliegue. Los nuevos servicios se incorporan al parque correctamente instrumentados en lugar de corregirse a posteriori.