Разбор аварии, после которого становится лучше

Разбор аварии, после которого становится лучше

Хороший разбор инцидента отвечает на вопрос «что в системе позволило этому случиться», а не «кто нажал». Разница видна сразу: в первом случае люди приносят детали, во втором — прячут их.

Порядок простой. Сначала восстановите ход событий по времени: когда сломалось, когда заметили, когда поняли, когда починили. Уже на этом шаге видно самое дорогое — разрыв между «сломалось» и «заметили».

Дальше ищите не одну причину, а цепочку. Обычно совпадает несколько условий: правка без проверки, отсутствие оповещения, выходной день, единственный человек, который знает эту область.

Потом — действия. Каждое должно иметь владельца и срок, иначе разбор превращается в психотерапию. И действий не должно быть двадцать: три выполненных лучше двадцати записанных.

И последнее: разбор без наказания работает только тогда, когда это правило соблюдают руководители. Один публичный разнос — и следующая авария будет тихой, долгой и с ремонтом на живую.

Айтишникам Петербурга это близко: в городе много команд, которые держат сервисы для внешних клиентов, а там цена простоя считается в деньгах.

IT Санкт-Петербург — t.me/itspb_news