탐지전달복구기록 분해와 SLO 영향 정리로 원인 해석 결
인턴 때 배포 후 API 응답이 갑자기 느려지는 이슈가 있었습니다. 알림은 `CloudWatch` 경보로 먼저 왔고, 제가 로그를 확인하러 들어갔습니다. RDS 커넥션이 급격히 늘어난 것이 보였고, 엔지니어에게 바로 전달하였습니다. 결론은 트래픽 스파이크에 의한 커넥션 풀 고갈이었습니다. 롤백은 아니었고 커넥션 설정을 조정하여 해결하였습니다. 사후에 `SLO` 기준으로 얼마나 영향이 있었는지를 정리하였는데, 이 과정에서 장애 대응이 기술 문제가 아니라 의사소통 구조 문제이기도 하다는 것을 배웠습니다. 빠른 전달이 복구 시간을 줄였습니다. 장애 대응은 혼자 하는 것이 아니라는 것을 배웠습니다.
탐지·전달·복구·기록 각 단계를 분리하여 보는 것이 팀 대응의 기본입니다.