Voltar para todos os casos de uso

ConsultoriaSoftware / plataformas digitais

Decidir o que enviar antes de decidir pelo que pagar

Fornecedor de plataforma SaaS B2B

Projeto de consultoria para governar o volume de telemetria ingerida e a alocação de usuários, para que o gasto com observabilidade reflita o valor operacional.

Visão geral

A ingestão de telemetria de um fornecedor de SaaS crescia muito à frente do próprio negócio, sem um responsável claro por esse crescimento. A AceMQ ajudou a empresa a atribuir o volume, cortar o que ninguém consumia e colocar controles na camada de coleta para que a redução se mantenha.

Desafio

A ingestão era dominada por um pequeno número de fontes: logs verbosos de frameworks encaminhados em nível debug, eventos customizados emitidos a cada requisição que só eram usados de forma agregada e métricas de infraestrutura coletadas em um intervalo muito mais fino do que qualquer dashboard exibia. Ninguém conseguia ver qual parte da fatura vinha da telemetria de cada equipe, então as conversas sobre custo não davam em nada e o crescimento continuava a cada trimestre.

Ambiente

New Relic em um ambiente AWS com várias contas, cargas de trabalho em Kubernetes e várias equipes de produto autônomas.

Abordagem

A AceMQ não opera a plataforma do fornecedor — ajudamos os clientes a decidir e controlar o que sai da sua infraestrutura. O trabalho atribui a ingestão por equipe e por fonte, verifica o que é realmente consultado e implementa drop rules e amostragem na camada de coleta, onde elas se aplicam independentemente do que cada aplicação emite.

Solução

  1. Volume de ingestão atribuído por equipe, serviço e tipo de telemetria, para que o custo tenha um dono, e não apenas um total
  2. Uso de queries e dashboards cruzado com a ingestão para identificar telemetria que é ingerida, mas nunca consumida
  3. Drop rules aplicadas na camada de coleta para as classes de logs e eventos comprovadamente não consumidas
  4. Níveis de encaminhamento de logs corrigidos na origem, removendo saídas de debug que tinham ficado ligadas desde incidentes passados
  5. Intervalos de coleta das métricas de infraestrutura alinhados à resolução que os dashboards e alertas realmente usam
  6. Orçamentos de ingestão por equipe, com monitoramento, para que uma mudança de logging apareça como um alerta, e não como uma fatura

Resultado obtido

O volume ingerido caiu cerca de quarenta por cento sem que nenhum dashboard ou alerta perdesse a sua fonte de dados. Como a ingestão agora é atribuída por equipe e tem orçamento, o crescimento passou a ser uma decisão visível, e não uma surpresa trimestral.

Tecnologias

New RelicOpenTelemetryKubernetesTerraform

Precisa de orientação de arquitetura para New Relic?

Os engenheiros New Relic sêniores da AceMQ já conduziram exatamente este tipo de projeto. Seja para orientação de arquitetura, correção mão na massa ou uma parceria gerenciada contínua, estamos prontos para ajudar.