목적 명확화와 재현 가능한 전처리 파이프라인
데이터 전처리에서 가장 중요하게 생각하는 것은 전처리의 목적을 모델 요구사항에서 출발하는 것입니다. 기술적으로 깔끔하더라도 모델이 필요로 하는 피처 특성을 만족하지 못하면 의미 없는 처리가 됩니다. 저는 전처리 전 모델 팀과 입력 데이터 요구사항을 명시적으로 합의하고, 재현 가능한 스크립트로 모든 처리를 코드화합니다.
버전 관리를 통해 전처리 로직 변경 이력을 추적하고, 변경 시 영향받는 모델을 파악할 수 있게 합니다. 라벨링에서는 일관성을 가장 중요하게 봅니다. 라벨러 간 기준이 달라 동일 케이스가 다르게 라벨링되면 모델이 모순된 신호를 학습하게 됩니다. 프로젝트에서 캘리브레이션 세션을 정기 운영해 일관성을 유지한 경험이 있습니다.