A/Bテストの実験設定の構成

お知らせ：当社は、お客様により充実したサポート情報を迅速に提供するため、本ページのコンテンツは機械翻訳を用いて日本語に翻訳しています。正確かつ最新のサポート情報をご覧いただくには、本内容の英語版を参照してください。

設定手順では、各バリエーションへのトラフィックの割り当て方法、結果の評価に使用する統計モデル、テストの有効化、ヒートマップの有効化、テストの実施スケジュールを設定できます。

これらを設定することで、テストを正しく実施し、テストの目的に最適な手法で収集データを分析できます。

テストの設定

テストを設定するには、次の手順を実行します。

1. テストのワークフローの［設定］手順に移動します。
2. トラフィックの割り当てを設定します。

3. テストの評価方法を選択します。

4. 有効化モードを設定します。

5. 必要に応じてヒートマップを有効にします。

6. テストの開始日と終了日を設定します。

7. ［次へ］をクリックして、概要手順に進みます。

トラフィックの割り当て

トラフィックの割り当てでは、元のページとテストの各バリエーションに訪問者をどのように割り当てるかを設定します。テストの目標と許容できるリスクに応じて、トラフィックの割り当て方法を選択します。

［手動での割り当て］

［自動での割り当て（多腕バンディット）］

手動での割り当て

手動での割り当てでは、各バリエーションに割り当てるトラフィックの量を細かく調整できます。すべてのバリエーションにトラフィックを均等に割り当てることも、テストの要件に応じて割合（%）を個別指定することもできます。この方法では、訪問者の割り当てを完全に制御でき、従来のA/Bテストで一般的に使用されます。

例：

1つの元のページと1つのバリエーションをテストするとします。

次のように割り当てます。

元のページ：50%
バリエーション1：50%

両方のエクスペリエンスに同じ割合のトラフィックが割り当てられるため、バランスの取れた比較が可能です。

トラフィックを不均等に割り当てることもできます。

例：

元のページ：70%
バリエーション1：30%

この方法は、新しいデザインを多数の訪問者に公開する前に、少数のオーディエンスを対象にテストする場合によく使用されます。

自動での割り当て（多腕バンディット）

自動での割り当てでは、多腕バンディット方式を使用して、テスト中にトラフィックの割り当てを動的に調整します。

テストが進むにつれて、PageSenseは成果の高いバリエーションにより多くの訪問者を自動的に誘導し、成果の低いバージョンへのトラフィックを減らします。これにより、テストの完了を待たずに、テストの実施中からコンバージョンを最大化できます。

例：

ランディングページの3つのバリエーションをテストするとします。

開始時には、すべてのバージョンにトラフィックが均等に割り当てられます。

結果が得られると、PageSenseはバリエーション2のコンバージョンが他よりも大幅に多いことを特定し、他のバリエーションへのトラフィックを減らしながら、このバリエーションに割り当てる訪問者を徐々に増やします。

自動での割り当てを使用する状況

次の場合は、自動での割り当てを使用します。

完全にバランスの取れたテストの実施よりも、コンバージョンの最大化を重視する場合。
PageSenseでトラフィックの割り当てを自動的に最適化する場合。
成果の低いバリエーションが訪問者に表示される機会を減らす場合。

テスト方法の設定

テスト方法によって、PageSenseで成果を評価し、統計的な信頼度を計算する方法が決まります。

［ベイズ法］

［頻度法］

ベイズ法

ベイズ法では、確率に基づいてテストを分析します。

ベイズ分析では、単に一方のバリエーションがもう一方を上回るかどうかを判定するのではなく、バリエーションの成果が高くなる確率を計算します。

この方法では、多くの場合、有用な分析結果をより早く得ることができ、ほとんどのビジネスユーザーにとって結果を簡単に解釈できます。

例：

バリエーションBがバリエーションAを上回る確率が92%と示された場合、一定のテスト期間が経過するのを待たなくても、改善の可能性を明確に把握できます。

メリット：

意思決定の迅速化
確率に基づく分析結果
結果を簡単に解釈可能
ほとんどの最適化テストに適している

頻度法

頻度法では、統計的有意性と信頼度のしきい値を使用してテスト結果を評価します。

ベイズ分析とは異なり、この方法で信頼性の高い結論を得るには、十分なサンプルサイズとテスト期間が必要です。

例：

バリエーションの統計的有意性が95%に達した場合、確認された改善が偶然に発生した可能性は低いことを示します。

メリット：

広く認められている統計的手法
フォーマルなテストプログラムに適している
信頼度に基づく確かな検証

統計的有意性の水準

頻度法を使用する場合、PageSenseが成果の高いバリエーションを特定するために必要な信頼度のしきい値を設定できます。

［クイックトレンド］

［最適］

［高精度］

［クイックトレンド］

クイックトレンドでは、必要な信頼度を低く設定することで、傾向をすばやく把握できます。

初期段階のパフォーマンス傾向を確認する場合に役立つ選択肢です。

最適な用途。

探索的なテスト
初期デザインの検証
短期間で繰り返すテスト

［最適］

最適では、テストの速度と結果の精度のバランスを取ることができます。

多くのビジネステストに適しており、通常はこの選択肢を推奨します。

最適な用途。

ランディングページの最適化
コンバージョン率の最適化
ユーザーエクスペリエンスのテスト

［高精度］

高精度では、勝者を決定する前に、より高い統計的信頼度が求められます。

この設定により誤検出の可能性を減らせますが、テスト期間が長くなる場合があります。

最適な用途。

影響の大きいビジネス上の意思決定
売上に直結するテスト
大規模な最適化施策

テストの有効化方法

有効化方法では、訪問者にテストを適用するタイミングを指定します。

［ページの読み込み時に有効にする］

［手動で有効にする］

［条件を満たすときに有効にする］

［ページの読み込み時に有効にする］

対象ページが読み込まれると、テストがすぐに実行されます。最も一般的な有効化方法です。

例。

訪問者がホームページにアクセスすると、割り当てられたバリエーションがすぐに表示されます。

［手動で有効にする］

カスタム実装によって手動で有効にした場合にのみ、テストが実行されます。この選択肢では、バリエーションを表示するタイミングをより細かく制御できます。

例。

特定のアプリケーションイベントが発生した後、開発者がテストを有効にします。

［条件を満たすときに有効にする］

事前に設定した条件を満たした場合にのみ、テストが実行されます。訪問者の行動やページの状態に応じてエクスペリエンスを表示できます。

例。

訪問者がページの半分までスクロールした後、または特定の要素を操作した後にのみ、バリエーションを実行します。

ヒートマップの有効化

ヒートマップを有効にすると、すべてのテストバリエーションで訪問者の反応データが自動的に収集されます。

ヒートマップを使用すると、訪問者が各バリエーションにどのように反応しているかを把握でき、テスト結果を分析する際の追加情報も得られます。

ヒートマップデータから、次の情報を確認できます。

クリック動作
スクロール動作
訪問者のエンゲージメント傾向
関心を集めている領域
反応が少ない領域

例。

バリエーションBでは、バリエーションAより多くのコンバージョンが発生しています。

ヒートマップを確認すると、訪問者が配置を変更したCTAボタンにより頻繁に反応していることが分かり、パフォーマンスが改善した理由を把握できます。

スケジュールの設定

スケジュールを設定すると、テストの開始時期と終了時期を制御できます。

特定のキャンペーン、プロモーション、季節イベント、または管理されたテスト期間中にテストを実行する必要がある場合は、スケジュールを設定します。

［後でこのテストを実行する］

指定した将来の日時にテストを自動的に開始する場合は、この選択肢を有効にします。

例。ブラックフライデー向けのテストを数日前に設定し、プロモーションの開始時に自動的に実行されるようスケジュールを設定します。

［開始日］

テストが有効になる日時を指定します。設定した開始日時より前に訪問したユーザーは、テストの対象になりません。

［終了日］

テストの実行が自動的に停止する日時を指定します。

終了日時に達すると訪問者の参加が終了し、新しいテストデータは収集されなくなります。

例：1週間のキャンペーン中のパフォーマンスを評価するため、2026年3月24日午後1時51分から2026年3月31日午後1時51分までテストを実行するようスケジュールを設定します。

ベストプラクティス

トラフィックを均等に割り当てる必要がある場合は、手動での割り当てを使用します。
テスト中にコンバージョンを最大化することを優先する場合は、自動での割り当てを使用します。
組織のテスト運用に合った統計手法を選択します。
多くのテストでは、有意性を［最適］に設定します。
訪問者の行動に関する追加情報が必要な場合は、ヒートマップを有効にします。
大規模なキャンペーンや商品のリリースに合わせて、テストのスケジュールを設定します。
テストの開始後は、設定を変更しないでください。

このドキュメントは、すべての手順を分かりやすく進められるよう作成されています。さらにサポートが必要な場合やご質問がある場合は、support@zohopagesense.comまで、お気軽にお問い合わせください。いつでもサポートいたします。