데이터가 틀어질 만한 곳을 떠올린 경험 중심으로 푸는 결
대학원 연구 프로젝트에서, 저는 한 데이터 분석 모델에 들어가는 데이터가 제대로인지 검토한 경험이 있습니다. 처음에 저는 데이터가 다 맞을 거라 여기고 분석부터 했는데, 결과가 이상하게 나왔습니다. 알고 보니 수집 과정에서 일부 값이 빠지거나 중복돼 있었습니다. 그 일을 겪고 저는, 데이터를 쓰기 전에 어디서 틀어질 수 있는지를 먼저 떠올리게 됐습니다.
빠진 값은 없는지, 같은 데이터가 중복되지 않았는지, 형식이 일정한지 같은 항목을 정해 하나씩 확인했습니다. 처음에는 데이터가 당연히 깨끗할 거라 믿었는데, 들어오는 데이터부터 점검해야 한다는 걸 배웠습니다. 입력이 틀리면 분석 전체가 틀어졌기 때문입니다. 지금도 저는 데이터를 다룰 때 먼저 점검하고 시작합니다.