제품 성과 지표를 정의하고 데이터 분석을 통해 어떤 인사이트를 도출한 경험이 있나요?

인턴 때 신기능 출시 후 성과 분석을 보조하며, 제가 정리한 건 어떤 지표를 어떤 순서로 보느냐였습니다. 출시 직후엔 오류율·서버 응답·크래시 빈도를 먼저 봐 기술 이슈가 없는지 점검했습니다. 48시간 뒤엔 기능 사용률과 첫 사용까지의 시간, 태스크 완료율을 봤고, 2주 뒤엔 그 기능을 쓴 그룹과 안 쓴 그룹의 리텐션 차이를 비교했습니다. 이 순서가 중요한 이유는, 기술 이슈가 있는 상태에서 비즈니스 지표를 보면 노이즈가 섞이기 때문입니다. 분석 결과 기능 사용자 그룹의 14일 리텐션이 11%p 높아, 그 기능을 온보딩에 넣자고 제안했습니다. 분석이 결정으로 이어진 셈입니다. 다만 제 한계도 인정합니다. 저는 보조 역할이라, 출시 전에 성공 기준을 미리 정하거나 채널별로 쪼개 보는 데까진 못 갔습니다. 또 리텐션 차이가 그 기능 덕인지 다른 요인인지 엄밀히 가르진 못했습니다. 그래서 단계별 순서로 보는 토대 위에, 성공 기준 설계와 귀인 분석을 더 키우려 합니다.