Bandit 알고리즘으로 광고 탐색-활용 균형
Multi-Armed Bandit 알고리즘을 광고 추천에 적용해 탐색-활용 균형을 해결한 경험이 있습니다. 기존 규칙 기반 추천은 성과가 검증된 광고만 노출해 신규 광고가 기회를 얻기 어려웠습니다. Thompson Sampling을 도입해 각 광고의 CTR을 베타 분포로 모델링하고, 불확실성이 높은 광고에도 탐색 기회를 자동으로 부여했습니다.
강화학습 관점에서 상태는 사용자 컨텍스트, 행동은 광고 선택, 보상은 클릭 여부로 정의했습니다. 데이터 기반 의사결정으로 보상 신호를 실시간으로 수집해 각 광고의 분포를 업데이트했습니다. AI 기술 활용 결과 신규 광고의 노출 기회가 35% 증가하면서 전체 CTR도 7% 향상됐습니다. 이 경험으로 RL의 탐색-활용 균형 개념을 실제 서비스에 적용하는 실전 감각을 키웠습니다.