Volver a todos los casos de uso

RemediaciónMultisectorial

Eliminar el riesgo de wraparound sin dejar la base de datos fuera de servicio

Proveedor de servicios de seguros

Intervención de emergencia en una base de datos que se acercaba al wraparound de ID de transacción porque autovacuum no podía seguir el ritmo de las tablas más grandes.

Descripción general

Una plataforma de seguros empezó a recibir avisos de que a la base de datos le quedaban unas pocas decenas de millones de transacciones para que se activara la protección contra el wraparound, lo que habría obligado al clúster a pasar a modo de solo lectura. AceMQ intervino bajo el SLA de emergencia y trabajó en el problema junto con el equipo de plataforma del cliente.

Reto

Autovacuum se cancelaba una y otra vez en las tablas más grandes y volvía a empezar desde cero, así que el horizonte de freeze nunca avanzaba. Las sesiones de analítica de larga duración y un pool de conexiones en estado idle-in-transaction mantenían fijado el horizonte xmin, de modo que ni siquiera las ejecuciones de vacuum que terminaban podían recuperar tuplas. La configuración de retardo basado en coste, heredada de un despliegue mucho más pequeño, limitaba autovacuum a una fracción de la E/S disponible.

Entorno

Primario de PostgreSQL con réplicas por streaming en hardware on-premise, que da servicio a cargas de trabajo de administración de pólizas y de siniestros.

Enfoque

La prioridad inmediata era hacer avanzar el horizonte de freeze en las tablas con mayor antigüedad antes de que el clúster se protegiera a sí mismo. AceMQ ejecutó operaciones manuales y selectivas de vacuum freeze sobre esas tablas con una configuración de workers ajustada y, al mismo tiempo, eliminó los bloqueos que impedían terminar a autovacuum para que la corrección se mantuviera después del incidente.

Solución

  1. Clasificación de las tablas por la antigüedad del ID de transacción congelado y ejecución de vacuum freeze selectivo empezando por las peores
  2. Finalización de las sesiones idle-in-transaction y de las snapshots de larga duración que mantenían fijado el horizonte xmin
  3. Reajuste del cost delay, el cost limit y el número de workers de autovacuum según la capacidad real de E/S del hardware
  4. Umbrales de autovacuum por tabla en las tablas grandes, en lugar de depender del escalado por porcentaje global del clúster
  5. Configuración de statement timeout y de idle-in-transaction session timeout para evitar que el problema se repita desde la capa de aplicación
  6. Monitorización de la antigüedad de las tablas, el número de dead tuples y los eventos de cancelación de autovacuum

Resultado final

El horizonte de freeze avanzó hasta quedar muy lejos del umbral de wraparound y el clúster nunca llegó a entrar en modo de solo lectura. Autovacuum termina ahora en las tablas grandes durante el funcionamiento normal, y el bloat acumulado durante meses empezó a recuperarse por sí solo.

Tecnologías

PostgreSQLLinuxPrometheuspgBackRest

¿Se enfrenta a un problema de PostgreSQL en producción?

Los ingenieros sénior de PostgreSQL de AceMQ ya han llevado a cabo antes este mismo tipo de proyecto. Tanto si necesita asesoramiento de arquitectura como remediación práctica o una colaboración continua de servicios gestionados, estamos preparados para ayudarle.