Почему вам не нужны все предупреждения: тревога или сводка

Первый порыв после неприятного случая всегда один и тот же: включить все предупреждения. Через шесть недель вы не читаете ни одного, и дело тут не в дисциплине.

Ценность тревоги не в том, что она звонит, а в том, что её читают. Тревога, звонящая каждый день, приучает вас не обращать на неё внимания и уносит с собой настоящую.

Три вопроса перед тем, как добавить тревогу

Если она зазвонит в три часа ночи, я встану? Если нет, это не тревога, а заметка. Заметкам место в другом.

Могу ли я что-то с этим сделать? Предупреждение, на которое вы не можете отреагировать, это не сведения, а только тревожность. «Температура диска 41 градус», это не тревога.

Сколько раз она зазвонит, когда всё в порядке? Если чаще, чем изредка, дело не в тревоге, а в пороге. На диске, который всегда держится на 82 процентах, порог в 80 создаёт не тревогу, а привычку.

Одно различие, которое чинит большинство установок

Тревога и сводка, это разные вещи. Тревога редка и прерывает вас: нужно отложить дело и посмотреть. Сводка регулярна и читается спокойно, рядом с кофе.

Большая часть того, что превращают в тревоги, на деле относится к сводке. «Столько-то обновлений», «эта машина вчера много работала», «эта резервная копия не снималась три дня»: ничего из этого не поднимет вас с постели, и всё же всё это стоит знать.

В тот момент, когда вы проводите это различие, вы выигрываете дважды: список тревог укорачивается и снова воспринимается всерьёз, а сводку действительно читают, потому что в ней есть содержание.

Порог, это не техническая мелочь, это сам замысел

Вместо того чтобы выбирать порог потому, что он звучит разумно, измерьте, как выглядит норма на вашей машине. На сервере, диск которого всегда на 78 процентах, 80 неверно, а 90 верно. На машине, где нагрузка всегда высока, тревоги по нагрузке не должно быть вовсе.

Настроить порог один раз и забыть тоже недостаточно. Машина меняется, работа на ней растёт. Раз в год спросить себя «какое предупреждение действительно меня чему-то научило», значит поправить пороги само собой.

Самое трудное: не знать, это не то же самое, что быть в порядке

Если проверка молчит, когда не может прочитать свои данные, вы читаете это молчание как здоровье. На деле не известно ничего.

Это самая коварная неисправность наблюдения, потому что экран зелёный. Правильное поведение, не сказать «всё хорошо», а сказать: «это я прочитать не смог». Сторож, который говорит, чего он не увидел, лучше того, который молчит.

Что делает Atlas

Atlas Watch, это не поток тревог, а ежедневная сводка. Она кладёт перед вами накопившееся за день состояние в одном месте, в виде, который можно читать спокойно.

Внутри двенадцать проверок: перезапуск сервера, заполненность корневого диска, память, нагрузка, время работы, ожидающие обновления, обновления безопасности, обновления, требующие перезапуска, крупный скачок ядра, остановленные критичные машины, процессор и память по каждой машине, и возраст резервной копии.

Каждую проверку можно выключить по отдельности, каждой можно задать собственную важность, а у большинства порог ваш. Пороги защищены нижней и верхней границей, поэтому бессмысленное значение не принимается: возраст копии от одного до шестидесяти дней, заполненность диска от пятидесяти до девяноста девяти процентов.

Одна из них заслуживает отдельного упоминания, потому что отвечает на самый трудный пункт выше: когда сведения о резервной копии прочитать не удаётся, Watch не молчит, а говорит, что не смог их прочитать. Люди читают молчание как здоровье; весь якорь доверия к сторожу держится на этом поведении.