공공 통계 API + 크롤링 혼합 수집
경제 DB 구축을 위해 한국은행 ECOS API, 통계청 KOSIS API, 금융감독원 전자공시를 주요 소스로 활용했습니다. 각 기관 API는 호출 제한과 응답 형식이 달라 공통 어댑터 레이어를 파이썬으로 작성했습니다. 공식 API가 없는 소스는 BeautifulSoup + Playwright로 크롤링했고, robots.txt 준수와 요청 간격 제어(1초 이상)를 원칙으로 삼았습니다. 수집 데이터는 출처·수집일·단위를 메타로 함께 저장해 출처 추적이 가능하도록 했습니다. 이 DB로 소비자물가·금리·산업생산 지수를 연결한 분석을 수행했고, 정책 변화와 경기 지표 간 선행 관계를 시각화해 내부 보고에 활용했습니다.