본문으로 건너뛰기
Chandler Nguyen
← 모든 실습 예시

GreenLeaf

가상 회사 · 합성 데이터

전체 6단계 중 4단계

캠페인 개선

완료율이 하락했습니다. 팀은 무엇을 바꿔야 하며, 아직 모르는 것은 무엇인가요?

캠페인 단계

별도의 9월 합성 코호트는 하락을 보여주지만 원인은 밝히지 못합니다. 이 제안 계획을 출시한 결과가 아닙니다. 무엇을 조사할지 정하려면 각 그룹의 7일 관찰 기간이 끝난 뒤 비교하세요.

실행 자료 · 날짜별 신호, 진단, 의사결정 기록

팀이 언제 무엇을 알았는가

이 비교는 과거 데이터를 대상으로 합니다. 두 7일 관찰 기간이 끝난 뒤 그룹을 비교하세요.

각 7일 관찰 기간이 끝난 뒤 9월의 두 그룹에서 퀴즈 완료율이 45%에서 28%로 하락했습니다.

유료 모바일 · 9월의 두 그룹, 각 그룹을 7일간 관찰

1주 차 ·
45%3,780 / 8,400

1주 차: 유료 모바일 퀴즈 시작 8,400건 중 3,780건 완료.

7일 관찰 기간. 코호트는 중복 제거된 사용자 여정 수입니다.
2주 차 ·
28%2,352 / 8,400

2주 차: 유료 모바일 퀴즈 시작 8,400건 중 2,352건 완료.

7일 관찰 기간. 두 가상 코호트는 같은 규칙으로 구성했습니다.
변화
-17 퍼센트포인트
고정 구성
35.33%기술적 비교, 인과관계 아님

유료 모바일 그룹은 2026년 9월 1일부터 14일까지입니다. 두 7일 관찰 기간이 9월 21일 23:59:59 UTC의 비교 전에 끝났으며 수치는 9월 22일에 기록했습니다.

고정 구성 점검

12개 모바일 channel × audience × creative 층에서 1주 차 가중치를 적용한 2주 차 비율은 35.33%이며 관측값은 28.0%입니다. 이 차이는 관측값과 고정 구성 비율 간 차이에 구성 변화가 기여함을 보여 줍니다. 동시에 12개 층 모두 1주 차보다 비율이 낮아졌습니다. 이는 기술적 분해이며 인과 효과 추정이 아닙니다.

출처: 확인된 캠페인 데이터; 12개 모바일 channel × audience × creative 층에 적용한 1주 차 가중치.

9월 21일 23:59:59 UTC
2주 차의 7일 관찰 기간이 끝난 뒤 첫 비교.두 7일 관찰 기간이 모두 끝났으며 수치는 9월 22일에 기록했습니다.
의사결정
예산을 옮기기 전에 오디언스 구성과 모바일 사용자 여정을 조사합니다.원인은 밝혀지지 않았으며 조기 경보가 발생했다고 주장하지 않습니다.

신호에서 범위를 정한 다음 검토까지

기존 합성 코호트 증거를 사용해 새로 작성한 판단 예시입니다. 기록된 AI 응답이나 사람 세션이 아닙니다.

확인된 신호
두 번의 7일 관찰 기간이 끝난 뒤 유료 모바일 퀴즈 완료율은 9월 1~7일 45%(3,780/8,400), 9월 8~14일 28%(2,352/8,400)로 17%p 낮았습니다. 첫 비교 가능 시점은 9월 21일 23:59:59 UTC입니다.
제안된 권고
예산을 옮기기 전에 대상 구성과 모바일 여정 및 이벤트 수집을 조사하고 재현합니다. 수치는 변화를 보여줄 뿐 원인을 말해주지 않습니다.

사람의 결정

예산과 크리에이티브 변경을 보류합니다. 조사를 다음 단계로 받아들이되 확정된 진단으로 보지 않습니다. 사람의 결정은 여기서 예시한 것이며 원본 자료에는 기록되어 있지 않습니다.

범위를 정한 다음 증거

다음 검토에서 대상 구성을 대조하고 두 코호트의 페이지/빌드 배포 이력을 비교한 뒤 동의된 모바일 여정 하나에서 quiz_start 및 quiz_complete 수집과 중복 제거를 확인합니다. 확인 후 재평가합니다. 알림이나 타기팅 변경이 있었다고 주장하지 않습니다.

이 선택을 한 이유

하락은 관찰됐지만 원인은 확인되지 않았습니다. 오디언스 구성 변화와 모바일 사용자 여정의 결함 모두 완료율을 낮출 수 있으며, 이 데이터만으로는 두 가능성을 구분할 수 없습니다.

다음 단계

진단 질문, 비교 가능한 코호트, 증거 요청을 보고 단계로 전달합니다.

더 살펴보기: 권고를 바꿀 수 있는 증거

다른 차트를 보기 전에 무엇을 확인할지 정해야 합니다.

  • 2주 차에 다른 퀴즈 버전이 배정됐음을 보여주는 기록.
  • 모바일 브라우저 하나에서 완료 이벤트가 누락됐음을 보여주는 이벤트 수집 기록.
  • 구성 비율의 변화를 설명할 만큼 큰 크리에이티브 또는 오디언스 변경.
  • 완료 이벤트 전에 실패하는 사용자 여정을 재현한 결과.
전체 참고 자료: 모니터링 및 의사결정 기록

무엇이 바뀌었는지, 수치가 어디서 왔는지, 두 7일 기간이 언제 끝났는지 기록합니다. 아래 모니터링 단계는 제안이며 이 예시에서 실제로 수행된 것은 아닙니다.

  • 제안된 조기 모니터링: 출시 당일부터 48시간까지 매 교대 시작과 종료 시 게재 현황, 동의된 이벤트 수집, 중복 사용자 여정을 확인합니다. 담당: 그로스 리드 및 애널리틱스 지원. 이벤트를 대조할 수 없으면 중단하고 조사합니다. 이 예시는 경보가 발생했다고 주장하지 않습니다.
  • 9월 1~7일과 9월 8~14일: 각 유료 모바일 코호트의 7일 관찰 기간이 끝난 뒤 비교합니다. 2주 차 수치가 더 낮지만 오디언스 구성과 모바일 사용자 여정은 여전히 서로 경쟁하는 설명입니다.
  • 첫 전체 비교는 2026년 9월 21일 23:59:59 UTC에 가능했습니다. 예산을 바꾸기 전에 오디언스 구성과 모바일 여정을 비교하고 방문자가 본 페이지 버전을 확인합니다.