SLO 설정·모니터링 알람·장애 대응 절차 문서화로 서비스 운영 책임 결
서비스가 사용자에게 원활하게 제공되도록 하기 위해 가장 먼저 한 것은 핵심 지표에 대한 SLO를 정의하는 것이었습니다. 가용성·응답 시간·오류율 같은 기준을 수치로 정하면 팀이 같은 목표를 공유하고 운영 판단의 기준도 명확해졌습니다.
알람 체계도 정비했습니다. SLO에 근접하거나 초과하면 자동 알림이 오는 구조를 만들었고, 야간·주말에도 대응이 가능하도록 온콜 담당자 로테이션을 팀과 합의했습니다. 장애 발생 시 첫 대응 시간을 줄이는 것이 사용자 영향을 최소화하는 핵심이었습니다.
장애 대응 절차를 런북으로 문서화했습니다. 자주 발생하는 장애 유형별로 진단 순서와 조치 방법을 정리해두면, 경험이 적은 팀원도 야간에 혼자 대응할 수 있었습니다. 사후 회고를 통해 재발 방지 항목을 런북에 추가하는 사이클이 운영 안정성을 높였습니다.