게임 로그 분석 기반 ML 피드백 루프 설계 경험
게임 AI 프로젝트에서 플레이어 행동 로그를 수집해 난이도 조절 모델을 개선하는 파이프라인을 구성했습니다. 로그에서 사망 패턴, 재시도 횟수, 진행 포기 시점을 특성으로 추출해 난이도 과부하 구간을 탐지했습니다. 탐지된 구간의 파라미터를 조정하고, 다음 배치 데이터에서 해당 구간의 포기율 변화를 측정해 모델 개선 여부를 검증했습니다. 피드백 루프에서 중요한 건 어떤 지표를 개선 신호로 쓸지 처음부터 정하는 것입니다. 지표가 없으면 모델을 바꿔도 좋아진 건지 알 수가 없습니다.
수집 → 분석 → 파라미터 조정 → 재측정의 주기를 짧게 유지하면서 개선 속도를 높이는 방향으로 진행했습니다. 개선 신호로 쓸 지표를 처음에 정하는 것이 피드백 루프를 의미 있게 만드는 조건입니다.