5주차 · 비즈니스 문제 정의: XYZ 가설
슬라이드 이동·퀴즈·계산기를 사용하려면 JavaScript를 켜 주세요.
어떤 결과가 나오면 생각을 바꿀까
문제를 설명하고, 고객의 행동을 예측하고, 그 예측이 틀릴 조건을 적는다.
문제: 누가 언제 어떤 일을 어려워하는가?
설명: 왜 그 어려움이 생기며, 제안은 어떻게 도움이 되는가?
예측: 어떤 조건에서 몇 명이 무엇을 할 것인가?
개념 해설
이번 주에는 현장의 문제를 설명하고, 고객의 행동을 예측하는 가설을 쓴다. 다음 주에는 프리토타입으로 그 행동을 관찰한다. 학교 주변 가게, 지역 행사, 동아리 등 실제로 만나 볼 수 있는 고객의 문제를 떠올려 보자.
읽기와 수업 순서
교재의 사고 도구에 가설 검증과 측정의 기초를 보탠다.
교재: 『아이디어 불패의 법칙』 1–3장 37–106쪽, 4장 107–130쪽.
보충 이론: 반증 가능성, 가능한 원인 비교, 관찰 전 계획, 표본과 측정.
수업 예제의 고객 수·가격·매출은 모두 가상 값이다.
개념 해설
교재는 시장 반응을 빨리 관찰하는 실무 방법을 제안한다. 보충 이론에서는 원인에 대한 설명을 비교하고, 관찰 결과의 적용 범위와 한계를 살펴본다.
좋은 구현과 충분한 수요는 다른 질문이다
오류 없이 작동해도 고객이 선택하지 않을 수 있다.
기술 질문: 회의 내용을 정확히 정리할 수 있는가?
사용 질문: 고객의 실제 작업에서 정리가 필요한가?
사업 질문: 고객이 지불하는 금액으로 제공 비용을 감당할 수 있는가?
개념 해설
사보이아는 제품을 잘 만드는 일과 고객이 원하는 제품을 찾는 일을 구분한다. 기술 성능과 고객 수요에는 각각의 근거가 필요하다.
책에서 말하는 시장 실패
새 제품의 판매 부진과 경제학의 시장실패는 뜻이 다르다.
| 구분 | 묻는 질문 | 예 |
|---|
| 교재의 시장 실패 | 제품에 충분한 수요가 있는가? | 성능은 좋은데 유료 고객이 부족함 |
| 경제학의 시장실패 | 시장 결과가 효율적인가? | 기업은 이익을 내지만 오염 비용이 사회에 전가됨 |
개념 해설
교재는 제품을 잘 만들고도 충분한 수요를 얻지 못할 수 있다는 뜻으로 시장 실패를 쓴다. 경제학의 시장실패는 외부효과·공공재·독점·정보 문제 등으로 자원이 비효율적으로 배분되는 경우를 가리킨다. 두 표현을 구분해서 읽자.
생각랜드: 의견이 관찰을 대신할 때
설명을 듣고 좋다고 말한 사람이 실제로 시간을 쓰는지는 아직 모른다.
칭찬은 고객의 의견으로 기록하고, 제품을 선택하는 행동을 따로 살핀다.
내가 겪은 불편이 어떤 고객에게도 반복되는지 확인한다.
고객 자료에는 실제 인터뷰와 행동을 기록하고, AI로 만든 답은 연습용 예시로 표시한다.
개념 해설
책의 생각랜드는 의견과 상상에 머무는 상태를 가리킨다. 의견은 아이디어와 질문을 만드는 데 쓸 수 있다. 그 의견이 어떤 행동으로 이어지는지는 실제 사람을 대상으로 따로 관찰한다.
먼저 최근에 있었던 일을 묻는다
최근 경험을 차례로 물으며, 고객이 지금 어떤 방법으로 문제를 해결하는지 알아본다.
지난 회의 뒤에 해야 할 일을 어떻게 확인했나요?
정리가 늦어진 가장 최근 상황은 언제였나요?
누가 얼마나 시간을 썼고, 어떤 대안을 썼나요?
개념 해설
앞으로 앱을 쓸지 묻는 질문은 가상의 상황에 대한 의도를 얻는다. 최근 경험을 묻는 질문은 문제의 빈도와 맥락을 찾는 데 도움이 된다. 기억 오류와 면접자에게 맞추려는 반응이 있을 수 있으므로 기록·일정·실제 작업과 대조한다.
관찰과 해석을 나란히 남긴다
“요약이 필요하다”는 해석 옆에 그 판단의 근거를 적는다.
| 가상 관찰 | 첫 해석 | 다른 설명 |
|---|
| 회의 후 담당자를 세 번 다시 물음 | 요약문이 없어서 혼란 | 담당자를 회의에서 정하지 않았음 |
| 마감일 다음 날 파일 제출 | 알림이 필요함 | 업무량이 많아 마감을 지키기 어려움 |
| 지난 회의록을 읽지 않음 | 긴 글이 부담됨 | 이미 구두로 필요한 일을 확인했음 |
개념 해설
관찰 기록은 해석을 다시 검토할 수 있게 한다. 같은 관찰에 다른 설명이 가능하면 추가 질문이 필요하다. 아래 사례는 실제 조사 결과가 아닌 가상 수업 기록이다.
누가 어떤 일을 하다가 어려움을 겪는가
고객을 직업명 하나로 정하면 서로 다른 상황이 섞인다.
대상: 이번 주 공동 발표를 준비하는 3–5인 학생 팀.
상황: 회의 직후 담당 작업과 마감을 확인해야 함.
현재 대안: 메신저·공유 문서·팀장의 수동 정리.
개념 해설
같은 대학생도 팀 과제의 유무, 회의 빈도, 역할에 따라 필요가 다르다. 목표 고객의 범위는 문제와 제안을 설명할 수 있을 만큼 구체적이어야 한다. 수업 예제는 한 고객군을 가정한 것이며 다른 집단의 수요를 뜻하지 않는다.
증상과 원인을 구분한다
제출이 늦어진 이유는 기록 부족일 수도, 담당자 배정이나 업무량 문제일 수도 있다.
설명 A: 결정 사항이 기록되지 않아 일을 놓친다.
설명 B: 결정은 알지만 담당자와 마감이 정해지지 않았다.
설명 C: 할 일을 알아도 처리할 시간과 자원이 부족하다.
개념 해설
원인이 다르면 필요한 해법도 달라진다. 예를 들어 요약문을 제공해도 지연이 계속되면 기록 부족이라는 설명을 다시 살펴야 한다. 같은 관찰을 설명할 수 있는 다른 원인도 함께 적어 보자.
해법이 도움이 되는 경로를 그린다
요약문을 읽은 고객의 행동이 어떻게 달라지고, 그 변화가 재이용으로 이어지는지 설명한다.
- 결정·담당자 기록
- 고객이 정리본 확인
- 다음 행동을 분명히 앎
- 작업 누락 감소
- 다시 이용하거나 결제
개념 해설
이 경로는 인과관계가 입증된 결과가 아니라 시험할 설명이다. 고객이 정리본을 읽지 않거나 담당자 지정이 틀리면 다음 단계로 이어지지 않는다. 어느 연결이 약한지 나누어 살피면 기능을 늘리기 전에 필요한 관찰을 정할 수 있다.
확인 문제 · 관찰에서 원인으로
팀의 절반이 회의록을 읽지 않았다. 이 관찰로 바로 말할 수 있는 것은?
가장 적절한 결론을 고르세요.
- 회의록이 길어서 읽지 않았다.
- AI 요약을 주면 반드시 읽는다.
- 해당 팀에서 읽지 않은 사람이 절반이며, 이유는 추가 확인이 필요하다.
- 회의록 서비스의 유료 수요가 없다.
개념 해설
원인 가설은 관찰을 설명하는 후보이며, 시험을 거쳐야 한다. 관찰 범위를 넘는 진술을 찾아보자.
사업 아이디어에는 여러 가정이 묶여 있다
고객 수요 하나만 확인해도 사업 전체가 성립하는 것은 아니다.
수요 가정
대상이 정리 서비스를 필요로 하고 제안을 선택한다.
제공 가정
정해진 시간에 필요한 품질로 전달할 수 있다.
경제성 가정
가격과 반복 이용이 제공·획득 비용을 감당한다.
개념 해설
사업 아이디어는 수요, 제공 능력, 비용, 고객에게 도달하는 경로에 대한 가정으로 이루어진다. Felin 등은 각 가정에 맞는 실험과 학습 방법을 선택해야 한다고 설명한다.
먼저 시험할 가정을 고른다
틀렸을 때 아이디어가 무너지는 가정부터 살핀다.
중요도: 이 가정이 틀리면 나머지 계획이 의미를 잃는가?
불확실성: 근거는 직접 관찰인가, 추측인가?
확인 비용: 시간과 돈을 얼마나 쓰면 이 가정에 관한 근거를 얻을 수 있는가?
개념 해설
수업에서는 중요도와 불확실성을 함께 비교한다. 이 비교는 생각을 정리하는 도구이지 객관적인 위험 점수 공식이 아니다. 정확한 자동 요약이 어렵더라도 먼저 수동 정리 서비스의 가치를 시험할 수 있다.
XYZ는 시장 행동을 수치로 적는 형식이다
목표 고객 Y의 최소 X%가 행동 Z를 할 것이다.
X · 최소 비율
가설에서 예측하는 최소 행동 비율. 왜 이 기준을 택했는지 함께 설명한다.
Y · 목표 고객군
어떤 상황의 누구를 대상으로 하는가.
Z · 관찰할 행동
클릭·예약 참석·유료 주문·재사용 중 무엇을 셀 것인가.
적어도 X%의 Y는 Z할 것이다.
개념 해설
교재 117–118쪽에서 X는 최소 비율, Y는 목표 시장, Z는 예상하는 시장 행동을 뜻한다. 여기에 가격과 기간을 적으면 어떤 조건의 행동을 관찰할지 분명해진다.
형용사를 비율과 행동으로 바꾼다
“많은 팀이 적극적으로 이용한다” 대신, 어떤 팀의 몇 %가 언제 무엇을 하는지 쓴다.
| 모호한 문장 | 관찰 가능한 문장 |
|---|
| 여러 팀이 관심을 보인다. | 제안을 본 목표 팀의 20%가 7일 안에 체험 시간을 예약한다. |
| 서비스가 인기가 있다. | 1회 이용 팀의 30%가 14일 안에 같은 가격으로 다시 주문한다. |
| AI 정리가 편리하다. | 정리본을 받은 팀의 60%가 24시간 안에 담당 작업을 확인한다. |
개념 해설
두 번째 문장은 정의된 조건에서 시험할 수 있다. 20%는 여기서는 가상 예제의 기준이며 업계 평균이 아니다. 목표 비율의 근거는 뒤에서 가격과 비용에 연결한다.
Y: 어떤 고객을 포함할지 정한다
포함 기준을 적어야 누구를 세었는지 재현할 수 있다.
포함: 7일 안에 공동 발표가 있고, 3–5명이 참여하는 팀.
제외: 이번 기간에 회의가 없거나 이미 같은 시험에 참가한 팀.
모집: 두 동아리의 공지와 수업 게시판. 경로별 인원을 따로 기록.
개념 해설
목표 고객의 조건과 실제로 모집한 고객의 특성을 함께 기록한다. 동아리 공지와 수업 게시판은 서로 다른 팀을 모을 수 있고, 친분이나 AI에 대한 관심도 참가에 영향을 줄 수 있다.
Z: 신청 뒤에 실제로 어떤 행동을 했는가
누른 버튼과 실제로 들인 시간·돈을 구분한다.
| 관찰 | 알 수 있는 것 | 남는 질문 |
|---|
| 좋다고 답함 | 의견·태도 | 실제로 이용하는가? |
| 체험 예약 | 그 조건에서의 초기 행동 | 약속 시간에 오는가? |
| 자료 제출·이용 | 노력을 들인 사용 | 그 가격에 결제하는가? |
| 유료 주문 | 그 가격과 약속의 선택 | 다시 이용하고 비용을 감당하는가? |
개념 해설
어떤 행동이 유용한 근거인지는 가설의 질문에 따라 달라진다. 체험을 예약했다면 참석 여부를, 유료 주문을 했다면 같은 가격의 재주문 여부를 이어서 확인할 수 있다. 환불 가능한 예약금은 최종 결제와 구분해 기록한다.
분모를 먼저 정한다
100팀에 제안하고 80팀이 보았으며 20팀이 주문했다면?
초대 대상의 반응을 보려면 초대 팀 수를 분모로 쓴다.
제안을 본 사람의 반응을 보려면 열람 팀 수를 분모로 쓴다.
열람 여부를 실제로 측정하지 않았다면 추측으로 분모를 만들지 않는다.
초대 기준: 20 ÷ 100 = 20% / 열람 기준: 20 ÷ 80 = 25%
개념 해설
초대 팀 수를 기준으로 하면 20%, 열람 팀 수를 기준으로 하면 25%다. 두 비율은 각각 제안 전달을 포함한 반응과 열람 이후의 반응을 나타낸다. 어떤 질문을 볼지 먼저 정하고 같은 분모로 결과를 계산한다. 수치는 가상 예제다.
개인과 팀을 섞어 세지 않는다
팀 서비스의 반응을 보려면 한 팀을 한 단위로 센다.
관측 단위: 개인인가, 팀인가, 주문인가?
중복 규칙: 같은 팀이 두 번 신청하면 어떻게 셀 것인가?
기록 규칙: 취소·미참석·환불은 어느 항목에 남길 것인가?
개념 해설
관측 단위가 바뀌면 비율의 의미도 달라진다. 팀 서비스를 개인 클릭 수로 평가하면 시장 반응이 부풀려질 수 있다. 고객 행동을 식별하는 데 필요한 최소 기록을 정하고 불필요한 개인정보는 모으지 않는다.
확인 문제 · 어떤 가설을 시험했나
가설은 “5,000원 정리 서비스 결제율 20% 이상”이었다. 제안을 받은 40팀 중 12팀이 무료 체험에 신청했다.
가장 정확한 해석은?
- 30%이므로 유료 수요 가설을 충족했다.
- 무료 체험 신청률은 30%지만 유료 결제 가설은 아직 시험하지 않았다.
- 무료 신청은 아무 정보도 주지 않는다.
- 유료 결제율도 30%라고 추정할 수 있다.
개념 해설
시험한 행동이 가설의 행동과 일치하는지 확인한다. 신청 뒤 결제 조건을 추가하면 다른 관찰이 필요하다.
유료 주문의 기준을 가격과 비용에서 찾는다
목표 이익을 내려면 몇 팀의 주문이 필요한가?
| 항목 | 가상 값 |
|---|
| 7일 고정비 | 80,000원 |
| 1회 가격 / 변동비 | 5,000원 / 1,000원 |
| 7일 목표 이익 | 40,000원 |
| 같은 조건으로 제안할 팀 | 100팀 |
필요 주문 팀 수 = (고정비 + 목표 이익) ÷ (가격 − 변동비)
개념 해설
목표 이익에서 필요한 매출과 주문 수를 거꾸로 계산하면 어떤 가정이 필요한지 드러난다. 이 예제는 7일 동안 한 팀이 한 번 주문하고, 고정비·가격·변동비가 일정하다고 가정한다. 변동비에는 정리 작업의 시간 비용과 예상 환불 비용도 고려한다.
경제성 기준을 XYZ에 연결한다
주문 한 건에서 4,000원이 남는다면 30팀의 주문이 필요하다.
(80,000 + 40,000) ÷ (5,000 − 1,000) = 30팀.
100팀에 같은 제안을 한다면 필요한 주문 비율은 30%.
가설: 7일 안에 공동 발표를 준비하는 3–5인 팀 100팀에 제안했을 때, 최소 30%가 7일 안에 5,000원 정리 서비스를 결제한다.
개념 해설
가격에서 변동비를 뺀 4,000원을 1회 공헌이익이라고 한다. 위 조건에서 필요한 주문 비율은 30%다. 실제 고객이 이 비율로 주문할지는 관찰로 확인한다. 가격·비용·제안할 팀 수를 바꾸면 필요한 비율도 달라진다.
가격을 바꾸면 확인할 가정도 달라진다
결제율의 기준은 제안 조건과 함께 움직인다.
가격을 6,000원으로 바꾸면 필요한 주문 팀 수는 줄어든다. 고객도 같은 비율로 주문할까?
변동비가 2,000원이라면 필요한 주문 비율은 어떻게 달라질까?
직접 정리한 시간을 비용에 넣었을 때도 이 가격으로 제공할 수 있을까?
개념 해설
계산기는 가상 사업의 고정비 80,000원과 목표 이익 40,000원을 사용한다. 가격을 올리면 필요한 주문 팀 수는 줄어든다. 고객도 같은 비율로 주문할지는 다음 관찰로 확인해야 한다. 필요한 팀 수는 올림하며, 제안할 팀 수보다 많으면 이 조건에서 목표에 도달하기 어렵다.
18팀이 주문했다면
주문 비율은 18%, 이익은 −8,000원이다. 이제 어떤 가정을 다시 살펴야 할까?
사업 기준 30%에는 미달했다.
추정 비율의 불확실성과 모집 편향은 별도로 검토한다.
기준을 바꾸려면 이유를 기록하고 다음 실험에 적용한다.
결제율 = 18 ÷ 100 = 18% / 이익 = 18 × 4,000 − 80,000 = −8,000원
개념 해설
모든 값은 가상 수업 데이터다. 미리 정한 사업 기준에는 미달했지만, 원인은 결제율 하나로 설명되지 않는다. 대상·제안 전달·가격·제공 품질·비용 가정을 살펴 다음 시험이나 중단을 결정한다.
어떤 관찰이면 생각을 바꿀 것인가
주장이 틀릴 수 있는 조건을 적어야 시험이 된다.
계속할 조건: 정한 대상과 가격에서 사업 기준을 충족하고 제공 비용도 확인됨.
수정할 조건: 반응은 있지만 가격·사용 상황 등의 특정 가정이 맞지 않음.
멈출 조건: 중요한 가정이 반복해서 성립하지 않고 바꿀 근거가 부족함.
개념 해설
포퍼의 반증 가능성은 주장과 충돌할 수 있는 관찰이 있는지 묻는다. 관측 비율은 표본에 따라 달라질 수 있으므로, 한 번의 기준 미달을 해석할 때 모집과 측정 조건을 함께 살핀다. 그 결과에 따라 계속할지, 수정할지, 멈출지 판단한다.
설명을 바꾸면 새 가설로 남긴다
예상과 다른 결과도 다음 설명을 만드는 자료가 될 수 있다.
| 결과를 설명할 가능성 | 다음 계획에 적을 내용 |
|---|
| “안내 제목에서 서비스 내용이 잘 드러나지 않았다.” | 같은 고객군에 서비스 내용을 드러낸 제목으로 안내하면 열람률이 높아질 것이라는 새 가설을 쓴다. |
| “친구들에게만 안내해 발표를 준비하는 팀에게 충분히 닿지 못했다.” | 다른 모집 경로에서 같은 목표 고객을 모집하고, 미리 정한 주문 비율을 확인한다. |
| “가격이 너무 높았다.” | 새 가격의 공헌이익으로 필요한 주문 비율을 다시 계산하고, 그 비율을 다음 가설에 적는다. |
개념 해설
문제를 살피며 가설을 수정하는 것은 필요하다. 다만 수정된 설명을 처음부터 예상한 것처럼 쓰면 탐색과 시험이 구분되지 않는다. 이전 문장과 수정 이유를 남기고 다음 관찰로 새 예측을 확인한다.
탐색에서 찾은 설명을 새 자료로 확인한다
자료에서 찾은 패턴은 다음 자료에서 확인한다.
탐색: 인터뷰에서 소규모 팀의 어려움을 발견함.
예측: 다음 시험의 고객군과 행동을 결과 전에 정함.
보고: 예상하지 못한 발견도 원래 계획과 구분해서 남김.
개념 해설
인터뷰에서 새 설명을 찾았다면, 다음 관찰의 대상·행동·판단 기준을 결과를 보기 전에 정한다. 실험 계획에 날짜를 쓰고, 수정한 이유와 예상하지 못한 발견도 함께 기록한다.
큰 시장을 작은 시험으로 좁힌다
범위를 줄이면 빨리 관찰할 수 있지만 결론의 범위도 좁아진다.
- 전국 대학생의 유료 수요
- 이번 주 발표 팀의 수요
- 두 동아리의 서비스 주문
- 실제 주문·이행·비용 관찰
개념 해설
교재 125–129쪽의 범위 축소는 가까운 대상과 작은 행동에서 먼저 시험하는 방법이다. 고객군이나 행동을 바꾸었다면 원래 전국 가설과 동일한 가설이 아니다. 작은 시험을 다음 단계로 연결할 때 그 차이를 설명한다.
지역에서 얻은 결과를 어디까지 적용할까
동아리에서 관찰한 반응을 전체 학생에게 적용하려면 두 집단의 차이를 살펴야 한다.
동아리 회원은 참여 의욕이 높아 전체 학생과 다를 수 있다.
교수 추천으로 참가하면 자발적인 시장 선택과 다를 수 있다.
다른 모집 경로·학년·사용 상황에서도 반복해 본다.
개념 해설
외적 타당성은 관찰한 대상과 조건에서 얻은 결과가 다른 대상과 조건에도 적용되는지 묻는다. 표본 수를 늘리는 일과 모집 대상의 차이를 줄이는 일은 다르다. 편의 표본의 비율을 전체 시장 비율로 단정하지 않는다.
같은 비율도 관찰 규모를 함께 본다
8/30과 80/300은 같은 관측 비율이지만 표본 수가 다르다.
| 관찰 | 관측 비율 | 함께 볼 점 |
|---|
| 30명 중 8명 | 26.7% | 표본이 달라질 때 비율이 크게 흔들릴 수 있음 |
| 300명 중 80명 | 26.7% | 같은 표본 모형에서는 흔들림이 줄지만 모집 편향은 남을 수 있음 |
개념 해설
같은 모집 방식에서 각각의 반응을 독립적으로 관찰한다고 가정하면, 표본이 커질수록 관측 비율은 덜 흔들리는 경향이 있다. 누구를 어떻게 모집했는지는 별도로 살핀다. 신뢰구간의 숫자와 해석은 보충 자료에서 다룬다.
가설을 실험 카드로 옮긴다
관찰 대상·행동·판단 기준을 미리 한 장에 적는다.
가설과 이유
XYZ 한 문장, 핵심 가정, 기준 비율의 근거.
관찰 조건
대상·분모·관측 단위·가격·기간·모집 경로.
판단과 자원
계속·수정·중단 기준, 비용 한도, 기록 방법.
개념 해설
수업의 실험 카드는 Callaghan의 계획 캔버스를 간단히 정리하고 관찰 전 계획 항목을 보탠 것이다. 확인한 조건은 적고, 아직 모르는 조건은 다음에 알아볼 질문으로 남긴다.
확인 문제 · 표본을 늘리면
친구 30명 대신 친구 300명을 같은 방식으로 모집했다.
가장 정확한 설명은?
- 300명이면 목표 시장을 자동으로 대표한다.
- 동일한 표본 모형에서 표본 오차는 줄지만 친분에 따른 선택 편향은 남을 수 있다.
- 모집 방식이 같으면 표본 수 증가는 아무 의미가 없다.
- 표본 수 100명 이상은 전국 조사와 같다.
개념 해설
정밀도와 대표성을 구분한다. 큰 표본의 숫자가 더 설득력 있어 보여도 모집 방식의 문제는 남을 수 있다.
지역의 고객 문제를 가설로 바꿔 보기
동네 가게·지역 행사·학교 주변에서 관찰한 어려움 하나를 고른다.
지역의 고객 문제·원인 설명·XYZ를 한 장에 작성하기
- 최근 상황 한 가지와 현재 대안을 적는다. 실제 관찰과 가정을 표시한다.
- 그 어려움이 생긴 이유를 두 가지로 설명하고 먼저 확인할 가정을 고른다.
- X·Y·Z와 가격·기간·분모를 적는다. X의 근거를 계산하거나 설명한다.
- 기준 미달일 때 확인할 측정 문제와 바꿀 가정을 나누어 적는다.
개념 해설
수업에서 본 회의 정리 사례를 참고해 다른 고객의 문제를 정리해 보자. 인터뷰나 기록으로 확인한 내용과 추측한 부분을 구분한다. 아직 현장 자료가 없다면 다음에 물어볼 질문을 적는다. 동료와 함께 설명이 충분한지, 행동을 기록할 수 있는지 살펴본다.
문장 검토 · 측정할 수 있는가
동료가 읽고 같은 대상을 세고 같은 행동을 기록할 수 있어야 한다.
“대부분”, “많이”, “만족”이 남아 있으면 측정 정의를 붙인다.
관측 단위와 중복·취소 처리가 정해져 있는지 확인한다.
무료 반응으로 유료 수요를 설명하고 있지 않은지 살핀다.
개념 해설
동료가 같은 대상을 세고 같은 행동을 기록할 수 있는지 살펴본다. 이어서 그 고객군을 선택한 이유와 제안이 도움이 되는 과정을 묻는다.
확인 문제 · 기준을 정한 뒤
가설의 기준은 30%였고 결과는 18%였다. 다음 기록으로 적절한 것은?
하나를 고르세요.
- 성공 기준을 15%로 바꿔 가설을 충족했다고 보고한다.
- 이번 결과가 목표 시장 전체의 결제율이라고 보고한다.
- 원래 기준 미달을 기록하고, 모집·제안·비용의 문제를 확인한 뒤 다음 가설을 정한다.
- 결제한 사람만 남겨 모집 대상의 결제율을 다시 계산한다.
개념 해설
결과를 숨기지 않고 새로운 설명과 원래 예측을 구분한다. 경제적 기준과 통계적 확신을 같은 것으로 다루지 않는다.
다음 주에는 무엇을 관찰할까
가설에서 예측한 행동을 프리토타입으로 기록할 수 있어야 한다.
관심을 묻는다면 안내 페이지를 열거나 체험을 예약하는지 본다.
사용을 묻는다면 실제 과업 수행을 본다.
유료 수요를 묻는다면 가격과 제공 조건이 있는 선택을 본다.
개념 해설
안내 페이지 열람, 실제 작업 수행, 유료 주문은 서로 다른 질문에 답한다. 다음 주에는 교재의 여덟 프리토타이핑 기법으로 어떤 행동을 관찰할 수 있는지 비교하고, 그 결과를 바탕으로 다음 실험을 정한다.
이번 주 핵심 문장을 다시 쓴다
문제의 설명과 고객의 행동 예측이 연결되어 있는가?
문제: 누구의 어떤 상황과 현재 대안인가?
설명: 제안이 도움이 되는 과정과 다른 가능한 원인은 무엇인가?
XYZ: 최소 비율·고객군·관찰 행동·가격·기간·분모가 분명한가?
판단: 관측 결과의 한계와 다음 확인 항목을 적었는가?
개념 해설
수업 후에는 실험 카드와 변경 기록을 남긴다. 정답처럼 보이는 숫자보다 어떤 관찰이면 생각을 바꿀지가 드러나는 문장이 필요하다.
보충 · 가설 검증을 가르친 창업 연구
가설 검증을 배운 창업자는 어떤 결정을 내렸을까?
연구 설계: 두 집단에 창업 교육을 제공하고 한 집단에 이론·예측·가설 시험을 더 가르침.
해석: 근거에 따라 멈추는 결정도 학습의 결과가 될 수 있음.
한계: 매출·이익·장기 생존은 서로 다른 성과 지표임.
개념 해설
Camuffo 등의 2020년 연구는 이탈리아 초기 창업기업 116개를 약 1년 추적했다. 2024년 연구는 기존 연구를 포함한 네 RCT, 759개 기업을 분석했다. 프로젝트 중단과 방향 전환에 변화가 나타났지만, 이를 XYZ 한 문장의 효과나 모든 산업의 성공률로 읽으면 범위를 넘는다.
보충 · 이론 없이 시험만 반복하면
바꿀 항목이 많을수록 무엇을 배웠는지 모호해질 수 있다.
설명 없이 버튼·가격·문구를 동시에 바꾸면 원인을 구분하기 어렵다.
고객이 아직 상상하기 어려운 기술의 가능성은 다른 학습 방법이 필요할 수 있다.
어떤 가정을 시험했으며 어떤 가정이 남았는지 기록한다.
개념 해설
Felin 등은 고객의 즉각적인 반응에만 집중하면 기술·자원·문제에 대한 다른 설명을 놓칠 수 있다고 논한다. 어떤 가정을 알아볼지 먼저 정하면 그에 맞는 실험을 고르고 결과를 해석할 수 있다.
보충 · 95% 신뢰구간을 읽는 방법
95%는 같은 방법으로 구간을 반복해서 만들었을 때, 참 비율을 포함하는 빈도를 뜻한다.
구간이 넓으면 현재 관측으로 비율을 정밀하게 추정하기 어렵다.
사업 기준을 넘는지와 통계적 불확실성이 충분히 작은지는 다른 판단이다.
신뢰구간이 좁다고 관찰의 모집 방식이 적절한 것은 아니다.
| 관측 | 관측 비율 | Wilson 95% 구간 |
|---|
| 30명 중 8명 | 26.7% | 14.2–44.4% |
| 300명 중 80명 | 26.7% | 22.0–31.9% |
개념 해설
빈도주의 95%는 이번에 얻은 한 구간 안에 고정된 참 비율이 있을 확률이라는 진술이 아니다. 수업에서는 독립 관측과 동일한 성공 확률을 가정해 Wilson 구간을 계산한다. 표본 편향·측정 오류·시장 변화는 별도로 검토한다.
보충 · 결제가 0건일 때의 해석
20명 중 아무도 결제하지 않았어도 참 결제율이 0이라고 단정할 수 없다.
0건의 단측 95% 상한 = 1 − 0.05^(1/20) ≈ 13.9%
개념 해설
가상 독립 이항 관측에서 0/20의 단측 95% 정확 상한은 약 13.9%다. 이는 목표 20%에 의문을 제기할 근거가 되지만, 모집 대상이 맞았는지와 제안이 전달됐는지, 결제 기능이 작동했는지도 확인해야 한다.
보충 · 사업 기준과 p값
통계적으로 차이가 뚜렷해 보여도, 사업에 필요한 만큼 큰 차이인지는 따로 판단한다.
사업 기준: 비용과 목표 결과를 감당할 정도인가?
통계 판단: 표본 모형과 데이터 아래 어떤 불확실성이 있는가?
실행 판단: 고객과 제공 조건을 고려해 다음 비용을 쓸 것인가?
개념 해설
ASA의 2016년 성명은 p값 하나로 의사결정을 끝내지 말고 맥락·효과 크기·전체 보고를 함께 보라고 권한다. p값은 가설이 참일 확률이나 효과의 크기가 아니다. 이 수업에서는 경제성 기준을 먼저 적고 비율의 불확실성을 함께 살핀다.
보충 · 범위를 줄인 가설을 확장할 때
고객·가격·채널 중 바뀐 조건을 하나씩 확인한다.
다음 확인 항목 하나 고르기
- 두 동아리에서 주문이 발생했다면 다른 모집 경로를 하나 정한다.
- 고객군과 가격을 유지한 채 어떤 차이를 확인할지 적는다.
- 전국 수요에 대해 아직 말할 수 없는 내용을 한 문장으로 남긴다.
개념 해설
작은 시험 뒤에는 다른 고객군이나 모집 경로에서의 반응, 실제 제공 비용을 이어서 확인한다. 교재의 100–1000명은 시험 규모에 관한 실무 권고다. 필요한 표본 수는 알고 싶은 비율의 정밀도와 모집 방식에 따라 검토한다.