콘텐츠킷 · 전략재료
가설·변수·기간·표본·판단 기준 다섯 칸으로 쓰는 구매 전환 실험 설계
P-전략재료-커머스-전환실험설계 · 기준일 2026-10-05
결론
광고주명 상품 개선은 감이 아닌 실험으로 결정. 시작 전에 다섯 칸을 채우지 않은 실험은 끝난 뒤 성공 여부를 판단할 수 없음
본문
| 칸 | 정할 것 | 이번 실험 |
|---|---|---|
| 가설 | 무엇을 어떻게 바꾸면 어떤 지표가 달라지는가 | 실험 가설 |
| 변수 | 이번에 바꾸는 단 하나 | 변경 요소, 나머지는 유지 |
| 기간 | 시작일과 종료일 | 7일 단위, 다른 프로모션과 겹치지 않는 주간 |
| 표본 | 판단에 필요한 건수 | 버전별 목표 결제 건수와 방문자 수 |
| 판단 기준 | 성공과 차이 없음의 조건 | 판단 지표 기준으로 사전 명시 |
가설 문장 형식
- 나쁜 예: 상세페이지를 보기 좋게 바꾸면 더 잘 팔릴 것
- 좋은 예: 상단 첫 화면에 지속 시간 정보를 추가하면 장바구니 대비 결제 완료율이 현재보다 오를 것
실험 대상 후보
| 영역 | 바꿀 수 있는 것 |
|---|---|
| 상세페이지 | 대표 이미지, 첫 문장, 리뷰 노출 순서 |
| 가격 | 할인 방식, 묶음 구성 |
| 배송·결제 | 무료배송 기준, 도착 보장, 간편결제 노출 |
숫자·기준
- 기간 최소 1~2주, 요일 편차 제거를 위해 7일 단위
- 표본: 버전별 결제 20~30건 이상
- 표본이 모자라면 기간 연장 또는 여러 상품에 같은 실험을 적용해 합산
- 시즌·대형 행사 달에는 검증된 방식으로 운영, 실험은 평범한 달에 배치
시각 계획
5행 설계 카드 1장을 중앙에, 오른쪽에 A안과 B안 화면 목업 나란히. 하단에 실험 대상 후보 3칸.
쓸 때 주의
- 월 방문자가 적은 판매자는 표본 기준을 채우는 데 걸리는 기간을 먼저 계산해 제시
- 여러 요소를 동시에 고치고 싶을 때는 우선순위를 정해 순차 실험으로 제안
- 광고 소재 테스트는 소재 소구 매트릭스 장에서 따로 다룸
광고주마다 바뀌는 값
- 광고주명
- 광고주 이름
- 실험 가설
- 무엇을 바꾸면 어떤 지표가 어떻게 달라지는지의 문장
- 변경 요소
- 이번에 바꾸는 단 하나의 요소
- 판단 지표
- 성공 여부를 볼 지표
함께 쓰는 디자인
출처
12code 아카데미 A08 22강 「실험 설계 기본기: 가설·변수·기간·표본 정하기(이커머스 버전)」. 실험 대상 후보는 23~25강 강의 주제 목록 기준. 등급: 강의 기반 정리