Volver a todos los casos de uso

ConsultoríaSoftware / Plataformas digitales

La mayoría de los builds lentos de Docker se deben a la invalidación de la caché, no al cómputo

Proveedor de software empresarial

Reestructuración de los Dockerfiles y de la caché de CI para que los builds reutilicen correctamente las capas, lo que redujo el tiempo de los pipelines y el tamaño de las imágenes en un gran conjunto de servicios.

Descripción general

Los builds de contenedores lentos casi siempre son un problema de orden de las capas. Un COPY de todo el árbol de código fuente antes de instalar las dependencias invalida la capa de dependencias en cada commit, y ningún hardware de build más rápido lo soluciona.

Desafío

El pipeline de CI superaba los veinte minutos por servicio y los desarrolladores agrupaban cambios para no tener que esperar. Los Dockerfiles copiaban todo el repositorio antes de instalar las dependencias, no tenían .dockerignore, así que el contexto de build incluía el historial de git y node_modules, usaban builds de una sola etapa que llevaban compiladores y herramientas de build a la imagen de runtime, y no fijaban ninguna versión, así que los builds no eran reproducibles.

Entorno

Decenas de servicios en contenedores construidos en CI y desplegados en Kubernetes, con imágenes descargadas entre regiones.

Enfoque

AceMQ reestructuró los Dockerfiles en torno a la estabilidad de la caché (los manifiestos de dependencias se copian e instalan antes que el código fuente, y los builds multietapa separan las herramientas de build del runtime) y habilitó una caché de build compartida respaldada en el registry para que los agentes de CI aprovechen el trabajo de los demás en lugar de arrancar en frío.

Solución

  1. Reordenamiento de las capas para que la instalación de dependencias preceda a la copia del código fuente y sobreviva a los commits habituales
  2. Incorporación de archivos .dockerignore para reducir drásticamente el tamaño del contexto de build
  3. Conversión de los builds de una sola etapa a multietapa, dejando los compiladores y las herramientas de build fuera de las imágenes de runtime
  4. Habilitación de la exportación e importación de la caché de BuildKit respaldada en el registry para que los agentes de CI compartan la caché
  5. Imágenes base fijadas por digest y versiones de dependencias fijadas para obtener builds reproducibles
  6. Definición de un presupuesto de tamaño de imagen por servicio verificado en CI

Resultado final

El tiempo de pipeline del servicio típico se redujo aproximadamente a la mitad, y las imágenes de runtime se achicaron considerablemente al quitar las herramientas de build, lo que también redujo el tiempo de descarga y la superficie de vulnerabilidades que informan los escáneres.

Tecnologías

DockerKubernetesKongPostgreSQL

¿Necesita orientación de arquitectura para Docker?

Los ingenieros sénior de Docker de AceMQ ya han realizado este mismo tipo de proyecto. Ya sea que necesite orientación de arquitectura, remediación práctica o una alianza continua de servicios administrados, estamos listos para ayudarlo.