Voltar para todos os casos de uso

ConsultoriaSoftware / plataformas digitais

A maioria dos builds Docker lentos é invalidação de cache, não falta de processamento

Fornecedor de software corporativo

Reestruturação dos Dockerfiles e do cache no CI para que os builds reaproveitem as camadas corretamente, reduzindo o tempo dos pipelines e o tamanho das imagens em um grande conjunto de serviços.

Visão geral

Builds de containers lentos quase sempre são um problema de ordem das camadas. Um COPY da árvore de código inteira antes da instalação das dependências invalida a camada de dependências a cada commit, e nenhum hardware de build mais rápido resolve isso.

Desafio

O pipeline de CI já passava de vinte minutos por serviço, e os desenvolvedores agrupavam mudanças para não ter que esperar. Os Dockerfiles copiavam o repositório inteiro antes de instalar as dependências, não havia .dockerignore, então o contexto de build incluía o histórico do git e o node_modules, os builds eram de estágio único e levavam compiladores e ferramentas de build para a imagem de runtime, e nada era fixado, então os builds não eram reproduzíveis.

Ambiente

Dezenas de serviços em containers construídos no CI e implantados em Kubernetes, com imagens baixadas entre regiões.

Abordagem

A AceMQ reestruturou os Dockerfiles em torno da estabilidade do cache — manifestos de dependências copiados e instalados antes do código-fonte, builds multi-stage separando as ferramentas de build do runtime — e habilitou um cache de build compartilhado baseado no registry, para que os agentes de CI aproveitem o trabalho uns dos outros em vez de começar do zero.

Solução

  1. Camadas reordenadas para que a instalação das dependências venha antes da cópia do código-fonte e sobreviva aos commits comuns
  2. Arquivos .dockerignore adicionados para reduzir drasticamente o tamanho do contexto de build
  3. Builds de estágio único convertidos em multi-stage, mantendo compiladores e ferramentas de build fora das imagens de runtime
  4. Exportação e importação de cache do BuildKit baseadas no registry habilitadas, para que os agentes de CI compartilhem o cache
  5. Imagens base fixadas por digest e versões das dependências fixadas, para builds reproduzíveis
  6. Orçamento de tamanho de imagem por serviço, verificado no CI

Resultado obtido

O tempo de pipeline do serviço típico caiu mais ou menos pela metade, e as imagens de runtime encolheram bastante depois da remoção das ferramentas de build — o que também reduziu o tempo de pull e a superfície de vulnerabilidades apontada pelos scanners.

Tecnologias

DockerKubernetesKongPostgreSQL

Precisa de orientação de arquitetura para Docker?

Os engenheiros Docker sêniores da AceMQ já conduziram exatamente este tipo de projeto. Seja para orientação de arquitetura, correção mão na massa ou uma parceria gerenciada contínua, estamos prontos para ajudar.