기준선을 벗어난 숫자를 빨리 알아채고 측정 문제와 실제 문제를 가르는 대응 절차

결론

데이터 이상은 막는 것보다 빨리 알아채는 것이 목표. 광고주명 계정의 평소 범위를 기록해 두고, 벗어나면 정해진 순서로 확인

본문

평소 감시

• 대상: 감시 이벤트
• 기준선: 최근 4주 평균
• 확인 대상: 기준선의 절반 이하 또는 2배 이상

숫자가 사라졌을 때의 순서

1. 영향 범위 확인: 전체인지, 특정 페이지·기기·채널인지

2. 교차 확인: 교차 확인 경로에서도 같은 감소가 보이는지

3. 측정 문제로 보이면 최근 태그·페이지 변경 점검, 실제 문제로 보이면 결제·서버 담당에 즉시 전달

4. 임시 보고: 확인한 것과 확인 중인 것을 구분해 공유

5. 이상 로그 기록: 날짜, 증상, 원인, 조치. 원인 미상도 기록

숫자·기준

• 기준선: 최근 4주 평균, 주 1회 대조
• 확인 발동: 절반 이하 또는 2배 이상
• 원인 확정 전에는 실제 감소로 단정하지 않고 확인 중으로 보고

시각 계획

왼쪽에 신호와 원인 표, 오른쪽에 5단계 세로 흐름. 2단계 교차 확인에서 측정 문제와 실제 문제로 갈라지는 분기 표시.

쓸 때 주의

• 리포트 신뢰를 강조하는 운영 제안의 보고 체계 장 뒤에 배치
• 주문 시스템 열람 권한이 없으면 교차 확인 주체를 광고주로 표기
• 감시 이벤트는 5개를 넘기지 않음

광고주명

광고주 이름

감시 이벤트

매주 확인할 핵심 이벤트 3~5개

교차 확인 경로

대조할 다른 데이터(주문 시스템, 문의 내역 등)

12code 아카데미 A03 17강 「데이터 누락·중복·급증을 발견하는 법」, 33강 「측정 사고 대응: 숫자가 갑자기 사라졌을 때」. 등급: 강의 기반 정리