Метафор про принципы надёжности в обычной жизни очень много. Если присмотреться.

Накануне оставил машину с «жёлтой лампочкой» - стрелка топлива упёрлась в ноль.

«Система мониторинга», явно показывала: «Заправь меня!». Но я подумал: «Да ладно. Заправка рядом с домом, сделаю это утром».

Ночью ударил мороз. Утром включил автозапуск, чтобы прогреть салон. Система отработала штатно: грела салон, тратя последние остатки топлива.

Итог понятен: утром пришлось идти на заправку, покупать канистру и бензин, нервничать…опаздывать…

А теперь проводим параллель (для интересующихся и/или заказчиков 😉)

1. Жёлтая лампочка/стрелка на 0 — это WARNING в вашем Grafana/Zabbix: «Свободной памяти < 10%», «Диск заполнен на 85%».

2. Мысль «Заправлюсь утром» — это «Пофиксим в понедельник», «Это же не Critical, подождёт».

3. Ночной мороз и автозапуск — это внезапный всплеск трафика, фоновое задание, обновление — любая рядовая нагрузка, которая добивает иссякающий ресурс.

4. Незаведённая утром машина — это полноценный критический инцидент в рабочее время. Простои, паника, звонки руководству, авральное разбирательство.

5. Поход за канистрой — это hot-fix и инцидент менеджмент, хотя всё можно было решить вечером планово и за 5 минут.

Мораль простая 😉

⚠️ Сигналы мониторинга существуют не для галочки. Они — прямой аналог датчиков в автомобиле. Игнорируя «жёлтые» алерты, вы гарантированно получаете «красный» инцидент в самый неподходящий момент.

Лень, надежда «на авось» и «и так сойдёт» в эксплуатации систем стоят дорого. Всегда.

@Simple_Reliability