Усталость от оповещений: сигналит всё, а значит - ничто
Ненастроенный мониторинг оповещает непрерывно: всплеск процессора во время ночного задания, диск, пересекающий порог, который он пересекает каждую неделю, служба, перезапускающаяся так, как и было задумано. Люди очень быстро усваивают, что это можно пропускать, - и они правы ровно до того дня, когда нельзя.
Как только канал приучил своих читателей его пролистывать, добавление новых оповещений делает хуже, а не лучше. Полезная метрика - не сколько всего обнаружено, а сколько дошло до человека, который после этого что-то сделал.
- Чат-канал, отключённый половиной команды
- Почтовое правило, складывающее оповещения в папку, куда никто не заходит
- Настоящий инцидент, найденный позже - в канале, где он всё это время и лежал