増分実験:ページ最適化による AI 起因売上の増分を測定する
収益アトリビューション →「実験」では、最適化したページと最適化していないページを比較し、最適化による AI 起因の売上・リード・AI 経由の訪問の増分を 95% の範囲付きで示します。使いどころ、おすすめの修正タスクのホールドアウト、手動での実験作成、結果の読み方を説明します。
どんなときに使うか
複数のページを最適化した(料金ページを書き直した、比較ページを追加したなど)後に、その最適化で AI 起因の売上がどれだけ増えたかを確認するために使います。対象ページの前後だけを比べても、同じ期間にサイト全体の AI 流入が増減していることがあり、正確ではありません。実験では、最適化したページ(実験群)と最適化していないページ(対照群)を比較し、両方に共通する変化を差し引いて、最適化による増分を求めます。
場所:サイドバー「収益アトリビューション」→「実験」。収益アトリビューションにデータがあること(最低限サイトスクリプトの設置)が前提です。
おすすめ:修正タスクのホールドアウト
これから複数のページを最適化する場合(「AI トラフィック」の最適化プランのページなど)、最も信頼できる測定方法は「修正タスクのホールドアウト」です。
- 1
「修正タスクのホールドアウト」を押す
「実験」タブのメインボタンです。
- 2
最適化するページを選ぶ
4 件以上選びます。
- 3
指標と対照期間を選ぶ
指標は「AI 起因の売上」「AI リード」「AI 経由の訪問」から選び、対照期間の初期値は 28 日です。
- 4
「無作為に分けて開始」を押す
ページは無作為に 2 群に分かれます。「実験群(今すぐ最適化)」は通常どおり最適化し、「対照群(… 以降に最適化)」は対照期間が終わるまで変更せず、その後に最適化します。割り付けが無作為なので、2 群の差が最適化による増分を表し、手動で選んだ対照群より信頼できます。対照期間中は、AI アシスタントや今週のタスクが対照群のページの変更を提案しません。期間が終わると、AI アシスタントがチャットで結果を報告し、残りのページの最適化をお知らせします。AI アシスタントに「このページでホールドアウト実験を作成して」と依頼することもできます。
実験を手動で作成する
ページの変更がすでに完了していて無作為に分けられない場合は、実験群と対照群を手動で指定します。「実験」タブ右上の「⋯」→「実験を手動で作成」を押します。
- 1
「名前」と「開始日」を入力
開始日はページの変更を公開した日です。過去の日付も指定できます。
- 2
「実験群のページ(最適化済み)」を入力
ページのパスをカンマ区切りで入力します(例:/pricing, /compare/)。 は任意の文字を表し、/compare/* は /compare/ 以下のすべてのページです。
- 3
「対照群のページ」を入力
最適化していないページを入力します。空欄の場合は、実験群以外のすべてのランディングページを使用します。
- 4
「指標」を選ぶ
「AI 起因の売上」「AI リード」「AI 経由の訪問」から選びます。
- 5
「比較日数」を入力
開始日の前後それぞれ同じ日数で比較します。初期値は 30 日、7〜120 日で指定できます。「保存」を押します。

収益アトリビューション → 実験
結果の読み方
実験ごとにカードが表示され、見出しに「{日付} 開始 · 開始前後 N 日ずつ比較」と表示されます。
- 増分:最適化によって増えた AI 起因の売上(またはリード・訪問)です。続く「範囲 a – b」は 95% の範囲です。対照群の前後の変化から最適化しなかった場合の実験群の値を推定し、実際の値からそれを引いたものが増分です。
- 実験群 / 対照群の変化:それぞれの開始前に対する開始後の変化率です。
- 信頼できる / データ不足:両群とも開始前・開始後にそれぞれ 10 件以上の記録(売上は成約件数、リードはリード数、訪問は訪問回数)があれば「信頼できる」と増分の数値を表示します。いずれかの群のいずれかの期間で 10 件未満の場合は「データ不足」と表示し、数値は表示しません。
- 表:群ごとの「ページ」「開始前 N 日」「開始後 N 日」「変化」。対照群のページが空欄のときは「その他すべてのランディングページ」と表示されます。
実施中の実験には「実施中 · N 日目」と表示されます。開始前・開始後とも経過した N 日分だけで比較し、比較日数に達すると結果が確定します。開始日前は「未開始」と表示されます。
よくある質問
「データ不足」と表示されます。 日数が増えるのを待つか、比較日数を長くして新しく実験を作成してください。件数の多い「AI 経由の訪問」を指標にする方法もあります。
範囲が 0 をまたぐのはどういう意味ですか? 95% の範囲内で増分がプラスにもマイナスにもなり得るため、今回の最適化の効果はまだ 0 と区別できない、という意味です。
対照群のページはどう選べばよいですか? 通常は空欄のままで構いません。同じ時期にほかのページも変更した場合は、変更していないページだけを入力してください。
実験は削除できますか? カード右上の ✕ を押します。閲覧者ロールは閲覧のみで、作成・削除はできません。
Was this article helpful?
