Volver a todos los casos de uso

SoporteMultisectorial

Soporte 24/7 de ingenieros sénior de MySQL con objetivos de respuesta desde 15 minutos, según el plan

Plataforma de reservas de viajes

Soporte continuo para deadlocks y lock wait timeouts bajo la concurrencia de reservas, incluido el crecimiento del history list por transacciones de larga duración.

Descripción general

Una plataforma de reservas veía cómo los deadlocks y los lock wait timeouts se disparaban durante los períodos de ventas pico, justo cuando las fallas resultaban más costosas. La aplicación reintentaba los errores a ciegas, lo que amplificaba la contención. AceMQ asumió el soporte de MySQL con ingenieros sénior asignados y escalamiento directo.

Desafío

La contención de bloqueos en InnoDB rara vez se resuelve solo con tuning; por lo general se origina en el orden de las sentencias y el alcance de las transacciones en el código de la aplicación. Para complicar las cosas, un job de reportes mantenía una read view abierta durante largos períodos, lo que hacía crecer el history list de InnoDB y obligaba a cada consulta afectada a recorrer cadenas de undo más largas. Bajo carga, ambos problemas se reforzaban entre sí.

Entorno

Clústeres de MySQL que abarcan capacidad on-premises y en la nube, como base de los flujos de reservas y pagos.

Enfoque

AceMQ leyó los registros de deadlocks y los diagnósticos de lock waits para identificar los pares de sentencias que realmente entraban en conflicto, y luego los rastreó hasta las transacciones de la aplicación que los generaban. Las correcciones se enfocaron en el alcance de las transacciones y el orden de acceso, y los cambios de configuración se usaron solo donde realmente ayudaban.

Solución

  1. Análisis de los registros de deadlocks y los diagnósticos de lock waits para identificar los pares específicos de sentencias en conflicto
  2. Rastreo de los conflictos hasta las transacciones de la aplicación y corrección del orden de acceso a las filas que los causaba
  3. Reducción del alcance de las transacciones para que las llamadas externas ya no se ejecutaran mientras se mantenían bloqueos de filas
  4. Identificación de la read view de larga duración del job de reportes que hacía crecer el history list y traslado de ese job a una réplica dedicada
  5. Reemplazo de los reintentos ciegos de la aplicación por un backoff acotado, para que la contención dejara de amplificarse a sí misma
  6. Escalamiento 24/7 a ingenieros sénior con objetivos de respuesta desde 15 minutos, según el plan, para incidentes en los períodos pico

Resultado final

El volumen de deadlocks durante los períodos pico se redujo drásticamente y los lock wait timeouts pasaron de ser rutinarios a ser poco frecuentes. La longitud del history list ahora se mantiene estable, lo que eliminó la sobrecarga de las cadenas de undo que degradaba consultas no relacionadas.

Tecnologías

MySQLProxySQLPrometheusKubernetes

¿Necesita soporte experto de MySQL?

Los ingenieros sénior de MySQL de AceMQ ya han realizado este mismo tipo de proyecto. Ya sea que necesite orientación de arquitectura, remediación práctica o una alianza continua de servicios administrados, estamos listos para ayudarlo.