면접관이 이 한 문장으로 확인하려는 것들. 각 갈래를 알면 답의 뼈대가 잡혀요.
인프라 운영을 맡으며 배포 시마다 순간적으로 5xx 에러가 튀는 문제가 있었습니다. 원인은 롤링 업데이트 중 신규 파드가 준비되기 전에 트래픽이 유입된 것이었습니다. Argo Rollouts로 카나리 배포를 도입해 신규 버전에 트래픽을 10%씩 단계적으로 늘리고, 각 단계마다 에러율을 자동 모니터링해 임계치를 넘으면 자동 롤백하도록 구성했습니다. 도입 후 배포 시 에러율이 0.3% 미만으로 유지됐고, 배포를 야간이 아닌 업무 시간에도 안심하고 할 수 있게 됐습니다.
인프라팀에서 월 1~2회였던 배포 주기를 개선해달라는 요청을 받았습니다. 기존엔 수동 승인 단계가 많고 테스트 환경 구성도 매번 새로 해야 했습니다. Terraform으로 스테이징 환경을 코드화해 파이프라인이 매 PR마다 임시 환경을 자동 생성·삭제하도록 만들고, 정적 분석과 통합 테스트를 통과하면 자동 배포되도록 승인 단계를 줄였습니다. 결과적으로 배포 주기가 주 1회 수준으로 단축됐고, 배포 관련 장애 티켓도 이전 대비 40% 줄었습니다.
클라우드 인프라 팀에서 CI/CD 파이프라인 운영을 맡으며 가장 어려웠던 점은 실패 원인 파악이 오래 걸린다는 것이었습니다. 로그가 각 단계별로 흩어져 있어 실패 시 원인을 찾는 데 평균 20분 넘게 걸렸습니다. Grafana와 Loki를 연동해 파이프라인 단계별 로그와 메트릭을 한 대시보드에서 볼 수 있게 만들고, 실패 시 슬랙으로 관련 로그 링크가 바로 오도록 알림을 구성했습니다. 이후 원인 파악 시간이 5분 이내로 줄어 대응 속도가 눈에 띄게 빨라졌습니다.
같은 실수가 반복돼요. 이것만 피해도 절반은 갑니다.
진짜 면접은 두 번째 질문부터예요. 이 답 뒤에 따라올 법한 것들.