Descripción general
Las compilaciones lentas de contenedores son casi siempre un problema de orden de las capas. Un COPY de todo el árbol de código fuente antes de instalar las dependencias invalida la capa de dependencias en cada commit, y eso no lo arregla ningún hardware de compilación más rápido.
Reto
El pipeline de CI había superado los veinte minutos por servicio y los desarrolladores agrupaban los cambios para no tener que esperar. Los Dockerfiles copiaban todo el repositorio antes de instalar las dependencias; no había .dockerignore, así que el contexto de compilación incluía el historial de git y node_modules; las compilaciones de una sola etapa metían compiladores y herramientas de compilación en la imagen de ejecución; y no se fijaba ninguna versión, por lo que las compilaciones no eran reproducibles.
Entorno
Decenas de servicios en contenedores compilados en CI y desplegados en Kubernetes, con imágenes descargadas desde varias regiones.
Enfoque
AceMQ reestructuró los Dockerfiles en torno a la estabilidad de la caché (manifiestos de dependencias copiados e instalados antes del código fuente, compilaciones multietapa que separan las herramientas de compilación del runtime) y habilitó una caché de compilación compartida respaldada por el registry, para que los agentes de CI aprovechen el trabajo de los demás en lugar de empezar en frío.
Solución
- Reordenación de las capas para que la instalación de dependencias preceda a la copia del código fuente y sobreviva a los commits normales
- Incorporación de ficheros .dockerignore para reducir drásticamente el tamaño del contexto de compilación
- Conversión de las compilaciones de una sola etapa a multietapa, dejando los compiladores y las herramientas de compilación fuera de las imágenes de ejecución
- Habilitación de la exportación e importación de la caché de BuildKit respaldada por el registry para que los agentes de CI compartan caché
- Imágenes base fijadas por digest y versiones de dependencias fijadas para obtener compilaciones reproducibles
- Establecimiento de un presupuesto de tamaño de imagen por servicio que se comprueba en CI
Resultado final
El tiempo de pipeline del servicio típico se redujo aproximadamente a la mitad, y las imágenes de ejecución se redujeron de forma considerable al eliminar las herramientas de compilación, lo que también acortó el tiempo de descarga y la superficie de vulnerabilidades que señalan los escáneres.