Production Outage Investigation

[Какой инцидент на проде расследовал, как нашёл причину и что предпринял.]

[MTTR ↓ до XX мин][0 повторных инцидентов]

Контекст

[Что за сервис упал/деградировал, какое влияние на бизнес, как обнаружили.]

Проблема

[Симптомы инцидента, масштаб воздействия, что было неизвестно в момент начала расследования.]

Ограничения

  • [Давление времени — прод лежит]
  • [Неполнота логов/метрик на момент инцидента]
  • [Нельзя экспериментировать на живом трафике]

Подход и решения

[Хронология расследования: как локализовал проблему, какие метрики/логи смотрел, как отсекал гипотезы. Подчеркни структурность под давлением.]

Реализация

[Что сделал для немедленного восстановления (mitigation) и что — для устранения корневой причины (fix).]

Результат

[Время восстановления, устранённая корневая причина, отсутствие рецидивов.]

Выводы

[Что добавил после инцидента: мониторинг, алерты, runbook, защита от повторения.]

← все кейсы