Existe um número que separa NOC saudável de NOC em sofrimento, e não é o número de incidentes — é o número de alarmes que chegam por dia. Quando esse número passa de algumas dezenas, alguma coisa está estruturalmente errada, e quase nunca é a rede que piorou. É a configuração de trigger que nunca foi revisada.
O custo real da fadiga de alarme
Fadiga de alarme não é só desconforto — é risco operacional direto. Depois de um certo volume, o comportamento humano muda: alarme deixa de ser lido com atenção e passa a ser reconhecido no automático, só pra silenciar a notificação. É exatamente nesse momento que o alarme importante — aquele que representa um rompimento de verdade — se perde no meio dos que não representam nada.
De onde vem o excesso, na prática
Na maioria dos ambientes, o volume de alarme vem de um número pequeno de causas repetidas:
- Falta de dependência entre triggers. Quando um link de backbone cai, cada PON, cada rádio, cada equipamento atrás dele dispara o próprio alarme — um evento real vira 40 notificações.
- Threshold genérico demais. Um limiar de latência ou utilização igual pra todo enlace, quando cada trecho tem um perfil de tráfego diferente, gera alarme "verdadeiro" tecnicamente, mas irrelevante na prática.
- Ausência de janela de flapping. Um link que oscila (sobe/desce repetidamente por segundos) sem um tempo mínimo de confirmação gera uma sequência de abre-fecha que ninguém consegue acompanhar.
- Sem severidade real. Quando tudo é "alta prioridade", nada é.
Reduzir ruído sem perder visibilidade — o equilíbrio que importa
O erro oposto também existe: silenciar demais e perder o alarme que importava. A saída não é reduzir a quantidade de coisa monitorada, é reduzir a quantidade de coisa notificada sem cortar o que fica registrado. Na prática:
- Configure dependência de trigger pra causa raiz suprimir o sintoma — sem apagar o histórico, só a notificação repetida.
- Ajuste threshold por perfil de enlace, não por padrão global.
- Use tempo de confirmação antes de disparar (
{TRIGGER.VALUE}=1sustentado por N segundos, não o primeiro sinal). - Separe por severidade de verdade — e proteja a severidade alta de virar lixo, tratando-a como escassa.
O objetivo final é simples de descrever e difícil de alcançar sem disciplina: o alarme que chega precisa merecer atenção. Se hoje 180 chegam por dia e só 2 importam, o problema não é a rede — é a régua.
Se sua régua de alarme parece mais uma enchente do que um filtro, fale com a gente — a gente já passou por isso ajustando ambiente de Zabbix de provedor real.