챗봇 서비스 로그 분석으로 응답 실패율 원인을 찾아 품질 개선한 경험 서술
팀 프로젝트에서 챗봇 서비스의 응답 실패율이 특정 사용자 그룹에서 높은 원인을 로그 분석으로 찾은 경험이 있습니다. 데이터 분석 경험으로는 사용자 입력 패턴을 토큰 단위로 분류하고, 매칭 실패 케이스를 의도 유형별로 집계했습니다. 그 결과 구어체·줄임말·복합 의도 입력에서 실패율이 62% 집중된다는 패턴을 발견했습니다. 서비스 품질 개선으로는 실패 케이스 상위 20개를 추려 학습 데이터에 추가했고, 배포 후 해당 유형 실패율이 31% 감소했습니다. 과거 경험 활용로는 전처리 단계에서 정규식으로 이모지와 특수문자를 통일화하는 방식을 이전 과제 코드에서 가져와 적용했습니다. 팀 협업으로는 제가 분석을 맡고, NLP 담당 팀원이 모델 수정을 진행해서 분석→수정→검증이 병렬로 돌아가는 구조를 만들었습니다. 데이터는 문제를 찾는 도구이고, 실제 개선은 어떤 케이스를 고를지의 판단에서 나온다고 봅니다.