本文へ移動
Chandler Nguyen
← すべての実例

GreenLeaf

架空の企業・合成データ

全6フェーズ中4番目

キャンペーンを改善する

完了率が下がりました。チームは何を変え、何がまだ分かっていないのでしょうか?

キャンペーンの各フェーズ

別の9月の合成コホートは低下を示しますが、原因は特定できません。この提案をローンチした結果ではありません。何を調べるか決めるため、各グループの7日間が終了してから比較します。

作業内容 · 日付付きのシグナル、診断、判断の記録

チームがいつ何を把握していたか

この比較は過去のデータを用います。両方の7日間の観測期間が終わってからグループを比較します。

各7日間の観測期間後、9月の2グループ間でクイズ完了率は45%から28%に下がりました。

有料モバイル · 9月の2グループ、各7日間観測

第1週 ·
45%3,780 / 8,400

第1週:有料モバイルの開始8,400件のうち3,780件が完了。

7日間の観測期間。コホートは継続ジャーニー数です。
第2週 ·
28%2,352 / 8,400

第2週:有料モバイルの開始8,400件のうち2,352件が完了。

7日間の観測期間。2つの架空コホートは同じルールで作成されています。
変化
-17 パーセントポイント
構成比を固定
35.33%記述的であり、因果を示さない

有料モバイルのグループ期間は2026年9月1日〜14日です。両方の7日間の観測期間が終わった後、9月21日23:59:59 UTCに比較し、数値は9月22日に記録しました。

構成比を固定した確認

モバイルの12層(channel × audience × creative)では、第1週の重みを適用した第2週の率は35.33%で、観測値28.0%との差があります。この差から、構成比が観測値と固定構成値の差に寄与していることが分かります。同時に、12層すべてで第1週から率が低下しています。これは記述的な分解であり、因果効果の推定ではありません。

出典:確認済みのキャンペーンデータ。12のモバイル層(channel × audience × creative)に対する第1週の重み。

9月21日23:59:59 UTC
第2週の7日間の観測期間後に行う最初の比較。両方の7日間の観測期間は終了しており、数値は9月22日に記録されました。
判断
予算を移す前に、オーディエンス構成とモバイルのジャーニーを調査します。原因は未解決です。早期アラートが発生したとはしていません。

シグナルから範囲を絞った次回確認へ

既存の合成コホートデータを使った新規作成の判断例です。記録された AI 回答や人とのセッションではありません。

確認済みシグナル
両方の7日間の観測期間後、有料モバイルのクイズ完了率は9月1〜7日が45%(3,780/8,400)、9月8〜14日が28%(2,352/8,400)で、17ポイント低下しました。初回比較は9月21日23:59:59 UTCに可能でした。
提案する対応
予算を動かす前に、オーディエンス構成を調べ、モバイルのジャーニーとイベント取得を再現します。数値が示すのは変化であり、原因ではありません。

人による判断

予算とクリエイティブの変更は保留します。調査を次の手順として採用しますが、原因が確定したとは扱いません。人による判断はここでの例示であり、ソース資料に記録はありません。

次回に確認する範囲を絞った根拠

次回のレビューでは、オーディエンス構成を照合し、各コホートが見たページとビルドのリリース履歴を比べ、同意を得たモバイルの1件のジャーニーで quiz_start と quiz_complete の取得・重複排除を確認します。その後に再評価します。アラートやターゲティング変更があったとは主張しません。

この判断の理由

低下は観測されていますが、原因は分かっていません。オーディエンス構成の変化もモバイルジャーニーの不具合も完了率を下げる可能性があり、このデータでは両者を切り分けられません。

次のステップ

診断上の問い、比較可能なコホート、必要な証拠の依頼を報告フェーズに引き継ぎます。

詳しく見る: 提案を変える可能性のある証拠

別のグラフを見る前に、チームでこれを明確にします。

  • 第2週に異なるクイズ版が割り当てられたことを示す記録。
  • 特定のモバイルブラウザーで完了イベントを取りこぼした計測記録。
  • 構成比の変化を説明できるほど大きなクリエイティブまたはオーディエンスの変更。
  • 完了イベントの前に失敗するジャーニーを再現できた記録。
参考資料の全文: モニタリングと判断の記録

何が変わったか、数値の出所、両方の7日間がいつ終了したかを記録します。以下の確認手順は提案であり、この例で実施されたものではありません。

  • 提案する早期モニタリング:ローンチ当日から48時間まで、各シフトの開始時と終了時に配信状況、同意済みイベントの取得、重複ジャーニーを確認します。担当:アナリティクスの支援を受けるグロース責任者。イベントを照合できない場合は停止して調査します。この例ではアラートが発生したとはしていません。
  • 9月1日~7日と9月8日~14日:各有料モバイルコホートの7日間の期間終了後に比較します。第2週は低いものの、オーディエンス構成とモバイルジャーニーが依然として競合する説明です。
  • 最初の完全な比較が可能になったのは2026年9月21日23:59:59 UTCです。予算を変更する前に、オーディエンス構成とモバイル動線を比べ、表示されたページの版を確認します。