가설을 세우고 검증하는 과정에서 어떤 접근 방식을 사용했는지 설명해 주세요.

팀 프로젝트에서 신기능 가설 검증을 주도할 때, 제가 가장 먼저 한 건 측정 가능한 성공 기준을 정하는 일이었습니다. 가설은 '알림 빈도를 높이면 재방문율이 오를 것'이었는데, 막연히 좋아지는지를 보면 결과를 마음대로 해석하게 된다고 봤습니다. 그래서 '알림 수신 후 24시간 이내 앱 재방문 여부'를 지표로 못 박고, 알림 빈도를 주 1회·주 3회 두 그룹으로 나눠 2주간 관찰했습니다. 결과는 주 3회 그룹의 재방문율이 높았지만, 동시에 알림 차단율도 함께 올랐습니다. 단기 지표와 장기 부작용이 같이 나온 셈입니다. 그래서 저는 빈도보다 알림 내용의 관련성이 더 중요하다는 방향을 팀에 제안했습니다. 가설 검증의 핵심은 원하는 결론을 확인하는 게 아니라 예상 밖의 신호를 찾는 것이라는 걸 배웠습니다. 다만 표본이 작아 결론을 단정하긴 어려워, 더 큰 데이터로 재검증이 필요하다고 봤습니다.