Prometheus e Alertmanager: Como Criar Alertas Úteis para Infraestrutura

Alerta bom reduz tempo de resposta

Prometheus coleta métricas e permite criar regras de alerta. Alertmanager recebe esses alertas, agrupa, silencia, roteia e envia notificações para canais da equipe. Juntos, eles ajudam a transformar métricas em ação. O desafio é criar alertas úteis, não uma fábrica de ruído.

Em VPS, servidores dedicados e aplicações web, métricas como CPU, RAM, disco, latência, erros HTTP, fila e certificados podem indicar problemas antes do cliente perceber. Mas alertar qualquer variação pequena gera fadiga e faz a equipe ignorar mensagens importantes.

Métrica não é alerta

Nem toda métrica precisa acordar alguém. CPU alta por dois minutos pode ser normal. Disco crescendo sem parar é mais preocupante. Um bom alerta combina impacto, duração e ação possível. Se ninguém sabe o que fazer quando ele dispara, o alerta precisa de revisão.

Severidade

Separe warning e critical. Warning pode indicar tendência ou risco futuro. Critical deve apontar impacto real ou iminente. Isso ajuda o roteamento: nem tudo precisa ir para plantão, mas tudo importante precisa chegar ao responsável.

Alertmanager

Use grouping para não receber cem mensagens do mesmo incidente. Use silences durante manutenção planejada. Configure rotas por serviço, equipe ou severidade. Inclua links para dashboards e runbooks na anotação do alerta.

Exemplos práticos

Disco acima de 85 por cento por 15 minutos, certificado vencendo em menos de 14 dias, erro 5xx acima do normal, fila acumulada por tempo prolongado e banco sem responder são bons candidatos. Ajuste limites com base no histórico real.

Referência

As documentações do Prometheus e do Alertmanager explicam regras e roteamento.

Conclusão

Alertas úteis são poucos, claros e acionáveis. Prometheus e Alertmanager funcionam melhor quando cada alerta tem dono, severidade, contexto e procedimento de resposta.