빅 데이터를 학습하였다고 써놨는데 실제로 어떤 프로젝트를 참가해서 해 본 경험이 있는가?

빅데이터 관련 프로젝트로는 졸업 프로젝트에서 공공 데이터를 활용한 분석 시스템을 구현한 것이 있습니다. 서울시 따릉이 대여 데이터를 활용해서 시간대별·지점별 수요 패턴을 분석하고, 특정 지점의 자전거 부족 여부를 예측하는 모델을 만들었습니다.

제가 맡은 부분은 `Pandas`와 `Matplotlib`을 사용한 탐색적 데이터 분석(EDA) 파트였습니다. 날짜·시간을 파싱하고 결측치와 이상치를 처리하는 과정에서, 실제 데이터가 얼마나 정제가 덜 된 상태로 제공되는지를 직접 느꼈습니다. 컬럼 형식이 날짜마다 다르게 기록된 구간도 있었고, 위치 좌표가 범위를 벗어난 케이스도 있었습니다.

이 경험에서 배운 것은 분석 전 데이터 검증에 얼마나 많은 시간이 드는지입니다. 모델링보다 데이터 전처리에 훨씬 많은 시간이 걸렸고, 데이터 품질 확인을 먼저 습관화하는 것이 이후 작업 효율과 직결된다는 것을 몸으로 익혔습니다.