예시 답변 1
약 65초
응답 코딩 기준서 기반 + 이중 검토
연구 보조 활동에서 설문 응답 코딩을 한 경험이 있습니다. 코딩 기준서에 따라 개방형 응답을 사전에 정해진 범주로 분류하는 작업이었는데, 처음엔 각자 기준을 다르게 해석해서 같은 응답에 다른 코드를 부여하는 경우가 생겼습니다. 코딩 불일치를 줄이기 위해 먼저 50건을 각자 코딩하고 비교하는 파일럿 과정을 거쳤는데, 불일치율이 처음에 15%였다가 두 번 조정 후 5% 이하로 낮아졌습니다. 이 과정에서 코딩 기준서가 애매할 때는 예시를 추가해서 해석 여지를 줄이는 게 중요하다는 걸 배웠습니다. 혼자 하는 작업이라도 일정 시점마다 기준을 다시 확인하지 않으면 일관성이 흔들린다는 것도 실감했습니다.
이 결의 특징
각자 기준을 다르게 해석해 같은 응답에 다른 코드를 부여하는 불일치가 생겼고, 50건씩 파일럿 코딩 비교를 통해 불일치율이 15%에서 5% 이하로 낮아진 구체 수치가 담겼습니다. 코딩 기준서가 애매할 때는 예시를 추가해 해석 여지를 줄이는 것이 핵심이라는 원칙이 그 과정에서 도출된 흔적이 있습니다.
이 결이 통하는 자리
코딩 일관성은 기준서 작성으로 끝나는 것이 아니라 파일럿 비교와 예시 보완을 통해 점진적으로 높여가는 과정에서 확보된다는 원칙이 살아있고, 구체 불일치율 수치가 개선 과정의 증거로 닫혀 있을 때 통합니다. 데이터 코딩 일관성 확보 방법을 묻는 꼬리질문이 줄어드는 결이 보입니다.