Знайте, что остановится дальше.

Макс один на ночной смене: от красного кольца он доходит до сайта, которым пользуются клиенты, проверяет, не плановые ли это работы с хранилищем, и в 7:00 передаёт дневной смене Ирины честную запись.

Ночная смена / NOC

Сбои · передача смены · плановые работы

Макс работает по ночам на дежурстве в компании доставки: это люди, которые круглосуточно следят за серверами (в IT говорят NOC, центр управления сетью). До 7:00 он один. Перед уходом Ирина из дневной смены написала в чате: «сегодня ночью работы с хранилищем». В 01:30 сервер в дата-центре становится красным. Это те самые плановые работы? Что из-за этого остановится? Кого Максу будить?

01

01:30. Красное кольцо.

На карте сервер в дата-центре носит красное кольцо. Макс не гадает. Он спрашивает AverDesk, что стоит над этим сервером, и система сама проходит цепочку вверх (вид влияния: хост, экземпляр услуги, услуга, продукт). От сервера зависят три вещи. Одна из них это сайт, где клиенты отслеживают посылки.

02

Кого будить.

Карточка каждой услуги работает как актуальная документация: какие порты она использует, с какими внешними системами общается, где её резервная площадка. На карточке указана и ответственная команда. Макс открывает инцидент (INC), то есть запись о сбое, и уведомление уходит этой команде в приложение, на почту и в Telegram. Если то же уведомление сработает снова, оно молчит, а не звонит повторно.

03

Это плановые работы?

Календарь обслуживания показывает работы с хранилищем с 02:00 до 04:00. Это через полчаса, и это другое устройство. Когда работы начнутся, хранилище получит оранжевое кольцо, а у сервера, который только что упал, красное. Теперь Макс знает две вещи: этот сбой не запланирован, а через полчаса услуги над хранилищем тоже уйдут в обслуживание.

04

Когда работы действительно начинаются.

Команда хранилища начинает в 02:20, а не в 02:00. AverDesk записывает фактическое время рядом с обещанным и пересчитывает, что задето. Группа услуг показывает худший статус среди своих участников, поэтому сайт посылок показывает «обслуживание» ровно столько, сколько работы длятся на самом деле.

05

07:00. Передача смены.

Приходит Ирина и читает историю инцидента вместо стикера на мониторе. Страница доступности показывает ночь такой, какой она была: текущее состояние и полосу за последние 90 дней. День, когда ничего не проверяли, остаётся пустым промежутком на полосе и никогда не закрашивается зелёным по умолчанию. Утренний отчёт честно говорит, за чем следили, а за чем нет. Макс идёт домой.