本文へ移動
Chandler Nguyen
← すべての実例全6フェーズ中5番目

結果を説明する

GreenLeaf

架空の企業・合成データ

← ケース一覧

報告ブリーフ

ローンチ判断の内側

何が起き、何を意味し、受け手ごとに何を判断すべきか?

キャンペーンの各フェーズ

予算を変えたり原因を断定したりする前に、オーディエンス構成とモバイルのジャーニーを調べます。

第1週の基準値
45%第1週の有料モバイルクイズ完了率
範囲
有料モバイル · 9月の2グループ、各7日間観測
次のステップ
オーディエンス構成とモバイル利用の流れを比較する

この架空のブリーフで提案する目標は、英国の月間売上US$60,000と非助成認知15%です。データから達成状況は分かりません。

各7日間の観測期間後、9月の2グループ間でクイズ完了率は45%から28%に下がりました。

第1週
45%8,400件中3,780件
第2週
28%8,400件中2,352件
変化
−17パーセントポイント
構成比を固定
35.33%記述的であり、因果を示さない

有料モバイルのグループ期間は2026年9月1日〜14日です。両方の7日間の観測期間が終わった後、9月21日23:59:59 UTCに比較し、数値は9月22日に記録しました。

原因はまだ特定されていません。

  1. ブリーフ

    ブリーフで判断、コホートの定義、レポートに使える根拠を定めます。

  2. AIの応答

    記録されたAI応答は診断レビューを提案していますが、金額の合計を誤って示しています。その誤りも明示したままにします。

記録されたAI応答の抜粋
| Spend | $110,100 | $110,100 |

検証済みの週別合計:$5,462と$5,512。

背景と判断

誤った広告費の合計は訂正が必要ですが、観測された完了率の低下は変わりません。調査の提案には、確認済みデータと人による判断が引き続き必要です。

確認すべき背景

モバイル表示の変更
架空の追加情報では、製品責任者が9月8日からのモバイル表示変更を報告しています。リリース記録とバージョン記録がないため、対象コホートの誰が変更後の表示を見たかは分かりません。
サポートの声
サポート責任者は、スマートフォンで次のステップが見つけにくいとの声を報告しています。日付付きの対応記録とコホートとの関連がなく、これらの声から原因は特定できません。
レポートの受け手

判断が必要な受け手を選んでください。3種類のレポートはすべて閲覧できます。

創業者向けレポート: ローンチの優先順位を変える前に、モバイル利用の流れとオーディエンス構成を分けて確認します。

創業者向けレポート

ローンチの優先順位を変える前に、モバイル利用の流れとオーディエンス構成を分けて確認します。

レポート全文を読む

メディア向けレポート

予算を変更するか決める前に、オーディエンス構成とクリエイティブの配信状況を比較します。

レポート全文を読む

コンテンツ・クリエイティブレポート

これは別個の候補にすぎません。その別の問いが残る場合に、透明性を訴えるメッセージと価格重視の案を比較します。まず、オーディエンス、デバイス、チャネルに関する比較可能な証拠を確認します。勝者は選ばれておらず、この比較でも低下の原因は特定できません。

レポート全文を読む

成果物を開く

同じ架空のレポートを、同じ確認済みの事実に基づいて3つの読者層向けにまとめています。上の抜粋は元のAI回答からのものです。

創業者向けレポート有料モバイル流入のクイズ完了率45% 28%

創業者向けレポート

架空の事例です。2026年9月1日〜14日のコホートを9月22日まで観測した、合成キャンペーンデータを使用しています。

何が起きたか

有料モバイルのクイズ完了率は 45% から 28% に低下し、17 パーセントポイントの減少です。 チェック済み件数は 3,780/8,400 → 2,352/8,400 です。デスクトップ完了率は 45.03% → 46.25% でした。

提供された有料コホート全体で、帰属された初回購入顧客は 467 → 357、帰属された初回購入収益は $37,360 → $28,560 でした。これらは構築されたアトリビューション結果であり、増分サブスクリプションや クイズによる収益損失の証拠ではありません。

なぜ重要か

クイズは英国ローンチにおける検討段階のステップです。完了率の低いオーディエンス層へのシフトと、 比較可能なモバイルグループ内の低下の両方が、集計の動きに寄与しています。 Week 1 の構成比を固定すると、Week 2 は 35.33% になります。つまり、構成比だけでは低下を説明できません。

プロダクトオーナーはモバイル表示改訂を報告し、サポートはユーザビリティの懸念を報告しています。 どちらも提供された証拠では計測コホートに結び付けられていません。製品原因は証明されていません。

次の検討事項

  1. モバイルジャーニー、イベント定義、リリース/バージョン 証拠を検証する。翌営業日に確認可能という報告はシナリオ上の想定であり、完了したアクションではありません。 比較計画または明示的な証拠欠落の声明を持って戻ること。
  2. このCSVだけを根拠に予算移動やクリエイティブ転換を承認しない。既存の 商業/リスク判断は通常の権限に従います。これは全面凍結ではありません。
  3. $60K/月 目標の達成/未達を宣言する前に、事業の9月全体の収益定義と 全チャネル結果を照合する。コホート収益と月次会計/事業指標には、明示的な同条件の照合が必要です。

フルCAC、利益、認知、実現ライフタイムバリュー、増分性は依然として利用できません。

元のレポート ↓
メディア向けレポート有料モバイル流入のクイズ完了率45% 28%

メディア向けレポート

架空の事例です。2026年9月1日〜14日のコホートを9月22日まで観測した、合成キャンペーンデータを使用しています。

何が起きたか

支出(USD)
Week 1
$5,462
Week 2
$5,512
クイズ開始数
Week 1
15,040
Week 2
15,120
クイズ完了数
Week 1
6,770
Week 2
5,460
帰属された初回購入顧客
Week 1
467
Week 2
357
帰属された初回購入収益
Week 1
$37,360
Week 2
$28,560
メディアCPA
Week 1
$11.70
Week 2
$15.44
帰属された初回注文ROAS
Week 1
6.84
Week 2
5.18

メディアCPAはメディア費用のみを含みます。 ROASは帰属された初回注文収益をメディア支出で割ったものであり、利益や因果的リフトではありません。

Google検索
W1 支出
$1,736
W2 支出
$1,744
W1 顧客
154
W2 顧客
105
W1 収益
$12,320
W2 収益
$8,400
LinkedIn
W1 支出
$2,296
W2 支出
$2,304
W1 顧客
154
W2 顧客
119
W1 収益
$12,320
W2 収益
$9,520
Reddit有料
W1 支出
$1,430
W2 支出
$1,464
W1 顧客
159
W2 顧客
133
W1 収益
$12,720
W2 収益
$10,640

承認済みの月次メディア予算が提供されていないため、予算消化ペースは評価できません。

モバイル比較に構成比チェックが必要な理由

モバイル完了率: 3,780/8,400 = 45% → 2,352/8,400 = 28%。変化は −17 パーセントポイント、 相対で約 −37.8% です。デスクトップは 2,990/6,640 = 45.03% → 3,108/6,720 = 46.25% です。

モバイルの懐疑層の開始数は 4,200 から 2,100 に減少し、探索層の開始数は 4,200 から 6,300 に増加しています。 構成比は 50%/50% から 25%/75% に変化しています。これらは構築された区分であり、検証済みの 顧客選好でもランダム化された介入でもありません。

12 のチャネル×オーディエンス×クリエイティブのモバイル層は、それぞれ 700 件の Week 1 開始数があります。 重み 700/8,400 = 1/12 を使用し、その層の Week 2 完了率を掛けます。加重レートを合計すると 35.33% になります(表示前に全精度を保持)。

この Week 1 加重の分解では、グループ内成分は −9.67 ポイント、構成成分は −7.33 ポイントです。 配分は選択したベースライン/順序に依存します。どちらの数値も因果効果ではありません。 12 層はすべて低下していますが、CSVでは理由を説明できません。

次の検討事項

  • イベント定義とソース/コホートタグ付けを検証する。同じ成熟度ルールを維持する。
  • リリース/バージョン割り当てを要求し、モバイルフローを再現する。 割り当てを再構築できる場合はバージョンを比較する。ログの欠落は結論を制限する。
  • 関係者へのリリース前に計算、文脈、判断を確認する。 製品原因を推測したり、正確な予算移動を推奨したり、目標への回復だけで有効なテスト設計とみなしたりしない。

報告されたモバイル表示改訂とサポート懸念は、これらのチェックを優先する根拠です。 欠陥、発生率、増分損失を証明するものではありません。

元のレポート ↓
コンテンツ・クリエイティブレポート有料モバイル流入のクイズ完了率45% 28%

コンテンツ・クリエイティブレポート

架空の事例です。2026年9月1日〜14日のコホートを9月22日まで観測した、合成キャンペーンデータを使用しています。

提案されたメッセージは例示であり、承認済みの広告表現ではありません。

何が起きたか

両方のメッセージグループで集計クイズ完了率が低下しています:

トレーサビリティ:“Know what is in every serving”(一回分に何が含まれているかを確かめる)
Week 1 完了数/開始数
3,276 / 7,560 = 43.33%
Week 2 完了数/開始数
2,625 / 7,560 = 34.72%
価値:“Compare the value of a clearly dosed serving”(含有量が明示された一回分の価値を比較する)
Week 1 完了数/開始数
3,494 / 7,480 = 46.71%
Week 2 完了数/開始数
2,835 / 7,560 = 37.50%

これらの合計にはデバイス、オーディエンス、チャネルが混在しているため、2つのメッセージを公平に比較できません。価値を伝えるメッセージの全体率は高いものの、どちらがより効果的かはこの数字だけでは分かりません。

上部の45% → 28%は有料モバイルのみの数値です。各メッセージの率にはデスクトップも含まれるため、より広い対象を表し、上部の数値を裏付けるものではありません。

なぜ重要か

顧客仮説は明確な成分情報を重視しています。報告されたモバイル表示改訂では、展開可能な情報パネルが 追加され、次のステップのラベルが変更されました。関連付けのないサポートフィードバックでは、次の操作が 見つけにくいと述べられています。クリック後の体験を点検するのは妥当です。しかし、利用できる証拠だけで メッセージ、パネル、ラベルを原因と呼ぶのは妥当ではありません。

次の検討事項

イベントの意味とジャーニー行動が検証された後、ページはメッセージの約束を明確にしつつ、 理解しやすい次のステップを保っているか。

プロダクトオーナーと広告からページへの受け渡しを点検する。トレーサビリティと価値を 明示的な仮説として保持する。すべての成分/用量の記述に裏付けがあることを確認する。

バージョン割り当てと比較可能なコホートが焦点を絞ったテストを支えられるか判断する。 実行前に分母、比較方法、判断ルールを設定する。割り当てやトラッキングがない場合は、その制限を文書化する。 前後での回復は因果的証明ではありません。

ここではクリエイティブの廃止、勝ちフックの主張、メディア予算の推奨は支持されません。 CSVには閲覧/再生の証拠が含まれていないため、疲労、混乱の発生率、どの画面で離脱したかは確立できません。

元のレポート ↓

有料広告経由のモバイルクイズ完了率は45%から28%に低下

1つの点は、有料広告経由でモバイルのクイズが開始された回数の1%を表します。塗りつぶした点は完了したクイズを表します。

モバイルの12層(channel × audience × creative)では、第1週の重みを適用した第2週の率は35.33%で、観測値28.0%との差があります。この差から、構成比が観測値と固定構成値の差に寄与していることが分かります。同時に、12層すべてで第1週から率が低下しています。これは記述的な分解であり、因果効果の推定ではありません。

有料広告経由のモバイルクイズ完了率は45%から28%に低下
有料モバイル流入のクイズ完了率
45%完了

3,780 / 8,400 クイズ開始数

第1週の基準値45%
オーディエンス構成を一定にする

チャネル × オーディエンス × 広告クリエイティブの組み合わせごとに、第1週のクイズ開始数の構成比を固定して計算すると、第2週の完了率は35.33%です。この比較は数値の変化を示すもので、原因を特定するものではありません。

有料モバイルの2グループ · 2026年9月1日〜14日 · 両方の7日間の観測後に比較 · 数値は9月22日に記録

低下は観測されています。原因は未解明です。

次に求める証拠

  1. リリース記録と、各コホートが見た正確なモバイルページの版を照合する。
  2. モバイルでの操作を再現し、重複や欠落も含めてquiz_startとquiz_completeイベントを突合する。
  3. 同じ問題に関する日付付きサポート記録を確認し、コホートの接触時期と比較する。

意思決定者: 優先順位を変えるかはグロース責任者が判断します。Analyticsは指標定義と分析を担当し、ProductとSupportは検証用の記録を提供します。

目標と結果からわかること

ここでは二つの異なる問いを分けています。この事例が目指すことと、記録された分析で確認できることです。

  • 事例の目標:英国のバイオハッキング市場で、GreenLeafを透明性の高い選択肢として認知してもらうこと。
  • この架空のブリーフで提案する目標は、英国の月間売上US$60,000と非助成認知15%です。データから達成状況は分かりません。
  • 測定対象:各グループの7日間の観測後における、有料モバイル利用者のクイズ完了率です。この例のデータから月間売上や認知結果は分かりません。
  • 各プランは例示です。結果はここに示した合成キャンペーンデータに基づいています。
元の資料

例で使用したファイルをダウンロード

この例で使用したファイルです。