신뢰·최신성 기준과 수집시점 기록 및 중복제거 품질관리 결
부동산 매물 정보를 수집할 때 가장 먼저 생각하는 건 출처의 신뢰성과 최신성입니다. 매물 정보는 시간이 지나면 이미 계약이 끝난 정보가 그대로 남아있는 경우가 많아서, 수집 시점을 함께 기록하는 게 중요합니다. 수업 프로젝트에서 공개 매물 데이터를 분석할 때, 중복 게시된 매물이 전체의 20% 이상이었던 경험이 있습니다. 그 이후로는 같은 주소·면적·가격 조합을 기준으로 중복을 제거하는 전처리 단계를 먼저 넣는 게 중요하다는 걸 배웠습니다. 정보의 양보다 사용 가능한 품질의 데이터를 얼마나 확보하느냐가 핵심이라고 생각합니다.
어떤 데이터가 살아있는 정보인지를 판단하는 것이 수집보다 더 중요한 작업입니다.