사용자 인터뷰로 문제 정의 후 반복 개선
사내 HR 문의 자동화 에이전트 개발 시 첫 단계로 실제 사용자 인터뷰를 진행했습니다. 시스템 없이 '어떤 문의가 가장 반복적이냐'를 HR 담당자 5명에게 물었고, 연차 계산·급여 명세 재발급·복지 신청 방법이 상위 3개임을 파악했습니다. 이를 에이전트의 핵심 범위로 정의하고 나머지는 1단계 스코프에서 제외했습니다. 해결 방안은 RAG 기반 FAQ 에이전트로, 사내 정책 문서를 청킹해 벡터 DB에 적재하고 사용자 질문에 가장 관련 있는 문서를 찾아 답변을 생성하도록 했습니다. 배포 후 사용자 피드백을 슬랙 반응 이모지와 짧은 만족도 조사로 수집했고, 초기 2주간 매일 로그를 분석해 오답 패턴을 분류했습니다. 1차 개선으로 답변 불만족율이 32%에서 11%로 감소했고, 이 과정이 반복되며 에이전트 품질이 빠르게 올라갔습니다.