문제 정의에서 런칭 후 성과 분석까지의 제품 개발 프로세스를 주도한 경험에 대해 말씀해 주세요.

분석 기반 제품 개선에서 초기 결과보다 그 결과가 시간이 지나도 유지되는지를 확인하는 것이 더 중요한 경우가 있습니다. A/B 테스트로 좋은 결과가 나왔어도, 단기 효과와 장기 효과가 다를 수 있습니다. 인턴 프로젝트에서 UI 변경 후 완료율이 상승한 것을 확인했는데, 2주 후 지표를 다시 확인하니 초기보다 수치가 안정됐지만 여전히 이전 대비 개선된 상태를 유지하고 있었습니다.

단기 수치와 안정화된 수치를 구분해서 보는 것이 분석의 신뢰도를 높입니다. 처음에는 신기한 것이어서 사용자가 더 적극적으로 시도하는 '신기효과'가 있을 수 있고, 그것이 사라진 후의 수치가 실제 효과에 더 가깝습니다. 결과를 빠르게 보고하는 것만큼 변화가 지속적인지 추적하는 과정이 분석의 완성입니다.