우문현답
愚 問 賢 答
회사별 면접직군별진행 방식
    홈›회사별›토스›백엔드›질문 상세
    問
    토토스백엔드직무 역량2026년 출제

    실험 설계 과정에서 기획자와 데이터 분석가와의 협업 경험은 어땠나요?

    답변 미리보기

    인턴 때 추천 버튼 위치 A/B 테스트를 설계하면서 기획자와 성공 지표 정의가 달랐습니다. 기획자는 클릭률을 보자고 했고, 저는 클릭 후 구매 전환율까지 봐야…

    예상 답변 시간
    60~90초
    예상 꼬리질문
    3회
    난이도
    난이도 중상
    출제 빈도
    높음
    INTERVIEWER'S INTENT · 면접관의 의도

    이 질문, 네 갈래로 뜯어봅니다.

    면접관이 이 한 문장으로 확인하려는 것들. 각 갈래를 알면 답의 뼈대가 잡혀요.

    問
    01
    협업 경험은 어땠는가?
    기획자와 데이터 분석가와의 협업 과정에서의 본인의 역할과 기여 흔적이 답에 있어야 합니다. 없으면 면접관이 '그 과정에서 어떤 어려움이 있었나요?'를 추가로 묻는 경우가 자주 보입니다.
    骨
    02
    문제 해결 방식은 어떤가?
    협업 중 발생했던 문제를 어떻게 해결했는지에 대한 흔적이 답에 있어야 합니다. 없으면 면접관이 '그 상황에서 어떤 대안을 생각했나요?'를 추가로 묻는 경우가 자주 보입니다.
    語
    03
    의사소통 방식은 어떤가?
    기획자와 데이터 분석가와의 의사소통 방식에 대한 흔적이 답에 있어야 합니다. 없으면 면접관이 '어떻게 의견을 조율했나요?'를 추가로 묻는 경우가 자주 보입니다.
    本
    04
    성과는 어떤가?
    협업 결과로 얻어진 성과나 배운 점에 대한 흔적이 답에 있어야 합니다. 없으면 면접관이 '결과적으로 어떤 발전이 있었나요?'를 추가로 묻는 경우가 자주 보입니다.
    말로 해봐야 는다
    읽는 것과 말하는 건 다릅니다.
    이 질문, 소리 내어 답해 볼까요?
    토스 면접관 페르소나가 이 질문을 던지고, 당신의 답에 꼬리질문으로 되물어요.
    음성으로 답해보기
    A/B 테스트 설계 시 성공 지표를 두고 기획자와 의견이 달랐던 경험 중심약 90초실험 샘플 크기 계산을 놓고 데이터 분석가와 협업해 합의한 경험약 90초실험 결과를 두고 기획자와 해석이 다른 상황을 조율한 경험약 90초
    기획자와 지표 정의 충돌 해결 경험
    약 90초

    A/B 테스트 설계 시 성공 지표를 두고 기획자와 의견이 달랐던 경험 중심

    인턴 때 추천 버튼 위치 A/B 테스트를 설계하면서 기획자와 성공 지표 정의가 달랐습니다. 기획자는 클릭률을 보자고 했고, 저는 클릭 후 구매 전환율까지 봐야 한다고 생각했습니다. 처음엔 서로의 의도를 전달만 하다가 논의가 평행선을 달렸습니다.

    데이터 분석가에게 중재를 요청해 과거 테스트에서 클릭률이 높았던 안이 전환율이 낮았던 사례를 공유 받았습니다. 그 데이터를 기획자에게 보여주니 자연스럽게 전환율을 1차 지표로 합의할 수 있었습니다.

    의견 충돌을 말로 설득하려 했던 게 실패의 원인이었습니다. 데이터를 먼저 찾아오는 것이 훨씬 빠른 합의로 이어졌습니다. 그 경험 이후로 협업에서 논의가 막히면 먼저 데이터부터 찾는 방향으로 접근하게 됐습니다.

    이 결의 특징
    성공 지표를 두고 기획자와 의견이 갈렸을 때 과거 데이터를 근거로 합의를 이끈 흔적이 있습니다.
    이 결이 통하는 자리
    의견 충돌을 말로 설득하려던 실패에서 데이터를 먼저 찾는 방향으로 전환한 관점이 답에 담겨 있을 때 면접관의 신뢰가 쌓이는 자리를 자주 봅니다.
    분석가와 샘플 크기 이견 경험
    약 90초

    실험 샘플 크기 계산을 놓고 데이터 분석가와 협업해 합의한 경험

    팀 프로젝트에서 신규 온보딩 플로우 A/B 테스트를 기획할 때, 저는 2주면 충분하다고 생각했는데 데이터 분석가가 4주 이상이 필요하다고 했습니다. 처음엔 왜 그렇게 오래 걸리냐고만 생각했습니다.

    분석가가 검정력 계산 공식과 기존 전환율 수치를 설명해 주면서 제가 예상한 효과 크기가 너무 낙관적이었다는 걸 알았습니다. 현실적인 효과 크기를 기준으로 다시 계산하니 3주가 필요했습니다.

    제가 감으로 잡은 기간이 틀렸던 경험이 좋은 교훈이 됐습니다. 이후엔 실험 기간 산정 시 분석가에게 먼저 검정력 계산을 부탁하고 시작하게 됐습니다. 협업은 서로가 모르는 영역에서 서로가 전문가라는 걸 그때 제대로 느꼈습니다.

    이 결의 특징
    실험 기간에 대한 이견을 분석가의 검정력 계산 설명으로 이해하고 조정한 흔적이 있습니다.
    이 결이 통하는 자리
    협업은 서로가 모르는 영역에서 서로가 전문가라는 관점이 구체적으로 담긴 답에서 통합니다.
    실험 결과 해석 갈등 경험
    약 90초

    실험 결과를 두고 기획자와 해석이 다른 상황을 조율한 경험

    사이드 프로젝트에서 결제 버튼 색상 변경 실험 결과가 나왔는데, 클릭률이 3% 올랐습니다. 기획자는 바로 배포하자고 했지만, 저는 통계적으로 유의미한지 확인이 필요하다고 생각했습니다.

    데이터를 분석해 보니 p-value가 0.12로 유의 수준 0.05를 넘었습니다. 우연에 의한 차이일 가능성이 컸습니다. 그 수치와 의미를 기획자에게 설명하는 데 어려움이 있었습니다.

    '동전을 10번 던져서 7번 앞면이 나왔다고 해서 앞면이 잘 나오는 동전이라고 단정할 수 없다'는 비유를 썼더니 이해가 됐다고 하셨습니다. 실험 결과를 함께 해석하는 것도 개발자의 역할이라는 걸 그때 배웠고, 이후엔 실험 보고 시 숫자뿐 아니라 해석 가이드를 함께 작성하게 됐습니다.

    이 결의 특징
    클릭률 상승을 바로 배포하자는 기획자에게 p-value를 비유로 설명해 이해시킨 흔적이 있습니다.
    이 결이 통하는 자리
    실험 결과를 함께 해석하는 것도 개발자의 역할이라는 관점이 답에 담겨 있을 때 면접관의 신뢰가 쌓이는 결이 보입니다.
    !
    위 답변은 여러 풀이 중 한 가지 예시입니다. 정답이 아니며, 외워서 그대로 말하면 면접관이 다음 질문을 그 자리에서 시작하는 경우가 많습니다. 본인의 프로젝트·기준·숫자로 다시 짜는 자리로만 쓰세요.
    ✕자주 빠지는 자리

    같은 실수가 반복돼요. 이것만 피해도 절반은 갑니다.

    • ✕떨어뜨린 옵션이 1개라도 있는가? "이게 답이었어요"만으로는 의사결정이 아니라 그냥 선택입니다.
    • ✕선택 기준이 그 프로젝트에 한정되는가? "성능이 좋아서"는 일반론, "우리 트래픽이 X 패턴이라서"가 본인의 답입니다.
    • ✕결과 숫자 1개를 정확히 말할 수 있는가? P95·QPS·적중률 — 무엇이든 1개. 숫자가 없으면 직감으로 한 일처럼 들리기 쉽습니다.
    • ✕지금 다시 한다면 어떻게 할지 답할 수 있는가? "잘했다"보다 "이건 다르게 했을 것 같다"가 더 깊은 인상을 남깁니다.
    ▶이어질 꼬리질문

    진짜 면접은 두 번째 질문부터예요. 이 답 뒤에 따라올 법한 것들.

    壹협업에서 가장 어려웠던 점은 무엇인가요?
    貳서로 다른 의견이 있었을 때 어떻게 조율했나요?
    參기획자와의 협업에서 가장 큰 성과는 무엇이었나요?
    이제, 직접 답해볼 차례예요.
    눈으로 읽은 답은 면접장에서 나오지 않아요. 토스 면접관과 이 질문으로 한 번 대화해 보세요.
    이 질문으로 모의면접 해보기
    또는, 다음 질문으로

    같은 흐름에서 자주 이어지는 질문들이에요.

    쿠팡 · ML 엔지니어
    실험을 설계하고 결과를 분석한 경험에 대해 이야기해 주세요. 어떤 접근 방식을 사용하셨나요?
    이 질문 보기
    삼성전자 · 반도체 설비기술
    실험을 수행하고 데이터를 분석할 때 어떤 방법론을 사용하나요?
    이 질문 보기
    토스 · ML 엔지니어
    실험 설계 및 모델 평가를 통해 모델 효과를 검증했던 경험에 대해 말씀해 주세요.
    이 질문 보기
    삼성전자 · 안전관리
    위험 분석 및 사전 작업 계획을 검토할 때 어떤 절차를 따르며, 이를 통해 얻는 이점은 무엇인가요?
    이 질문 보기
    안내 · 이 페이지의 질문·답변·꼬리질문은 유사 직군 채용 시장의 공개된 면접 후기·커뮤니티 게시물을 분석해 구성한 학습 자료입니다. 실제 출제·회사 공식 입장과는 무관하며, 정정 요청 시 24시간 내 반영합니다. 자세히
    개인정보처리방침이용약관문의
    © 2026 우문현답. All rights reserved.
    이 페이지 목차
    01면접관의 의도02답변의 결03실수·꼬리질문04관련 질문
    말로 해봐야 는다
    이 질문, 토스 면접관과
    음성으로 답해볼까요?
    모의면접 해보기
    첫 회 무료 · 종료 즉시 음성 폐기