増分実験：ページの変更で AI 収益がどれだけ増えたか

どんなときに使うか

いくつかのページを変更した（料金ページを書き直した、比較ページを追加したなど）ときに、その変更で AI からの収益がどれだけ増えたかを知りたい場合に使います。変更したページの前後だけを見ても、同じ期間にサイト全体の AI 流入が増減していることがあります。増分実験は、変更したページ（実験グループ）と変更していないページ（対照グループ）を比べ、両方に共通する変化を差し引いて、変更による増分を求めます。

場所：サイドバー「収益アトリビューション」→「増分実験」。収益アトリビューションにデータがあること（最低限サイトスクリプトの設置）が前提です。

実験の作成

収益アトリビューション → 増分実験

結果の読み方

実験ごとにカードが表示され、見出しに「{日付} 開始 · 開始前後 N 日ずつ比較」と表示されます。

• 増分：変更によって増えた AI 収益（またはリード・訪問）です。続く「範囲 a – b」は 95% の範囲です。対照グループの前後の変化から「変更しなかった場合」の実験ページの値を推定し、実際の値からそれを引いたものが増分です。
• 実験グループ / 対照グループの変化：それぞれの開始前に対する開始後の変化率です。
• 信頼できる / データ不足：両グループとも開始前・開始後にそれぞれ 10 件以上（収益は成約件数、リードはリード数、訪問は訪問回数）あれば「信頼できる」と増分の数値を表示します。どちらかのグループのどちらかの期間で 10 件未満の場合は「データ不足」と表示し、数値は出しません。
• 表：グループごとの「ページ」「開始前 N 日」「開始後 N 日」「変化」。対照ページが空欄のときは「その他すべてのランディングページ」と表示されます。

実施中の実験には「実施中（N 日経過）」と表示されます。開始前・開始後とも経過した N 日分だけで比較し、比較日数に達すると結果が確定します。開始日前は「未開始」と表示されます。

よくある質問

「データ不足」と表示されます。 日数が増えるのを待つか、比較日数を長くして新しく実験を作成してください。件数の多い「AI 訪問」を指標にする方法もあります。

範囲が 0 をまたぐのはどういう意味ですか？ 95% の範囲内で増分がプラスにもマイナスにもなり得るため、今回の変更の効果はまだ 0 と区別できない、という意味です。

対照ページはどう選べばよいですか？ 通常は空欄のままで構いません。同じ時期にほかのページも変更した場合は、本当に変更していないページだけを入力してください。

実験は削除できますか？ カード右上の ✕ を押します。閲覧者ロールは閲覧のみで、作成・削除はできません。