장애 알람 → 영향 범위 확인 → 원인 가설 → 롤백 or 수정 순서
인턴 기간에 사내 모니터링 도구 알람이 울렸을 때 처음으로 1차 대응을 옆에서 배웠습니다. 선배가 먼저 한 건 영향 범위 확인이었습니다. "어떤 서비스가 죽었는지"를 파악하고, 그다음 최근 배포나 설정 변경이 있었는지 타임라인을 봤습니다. 저도 비슷한 흐름을 따라 보니까 무작정 재시작보다 원인 가설을 먼저 세우는 게 훨씬 빠르게 해결됐습니다. 제가 직접 실수한 건, 알람이 뜨자마자 로그를 너무 깊이 파고들다가 5분을 더 쓴 것이었습니다. 빠른 1차 대응에선 깊은 분석보다 서비스 복구가 우선이고, 원인 분석은 복구 후에 한다는 걸 그때 배웠습니다. 이후 스터디에서 장애 시뮬레이션을 할 때는 이 순서를 팀에 공유했습니다.