A/Bテストの実験設定の構成

お知らせ：当社は、お客様により充実したサポート情報を迅速に提供するため、本ページのコンテンツは機械翻訳を用いて日本語に翻訳しています。正確かつ最新のサポート情報をご覧いただくには、本内容の英語版を参照してください。

設定の手順では、各バリエーションへのトラフィックの割り当て方法、結果の評価に使用する統計モデル、テストの有効化、ヒートマップの有効化、テストの実施スケジュールを設定できます。

これらを設定することで、テストを正しく実施し、テストの目的に最適な手法で収集データを分析できます。

テストの設定

テストを設定するには、次の手順を実行します。

1. テストのワークフローで［設定］の手順に移動します。
2. トラフィックの割り当てを設定します。

3. テストの評価方法を選択します。

4. 有効化モードを設定します。

5. 必要に応じてヒートマップを有効にします。

6. テストの開始日と終了日のスケジュールを設定します。

7. 概要の手順に進むには、［次へ］をクリックします。

トラフィックの振り分け

トラフィックの振り分けでは、元のページとテストの各バリエーションに訪問者を割り当てる方法を設定します。テストの目標と許容できるリスクに応じて、トラフィックの割り当て方法を選択します。

［手動での割り当て］

［自動での割り当て（多腕バンディット）］

手動での割り当て

手動での割り当てでは、各バリエーションに割り当てるトラフィック量を細かく指定できます。すべてのバリエーションにトラフィックを均等に割り当てることも、テストの要件に応じて割合（%）を個別指定することもできます。この方法では訪問者の割り当てを完全に制御でき、従来のA／Bテストで一般的に使用されます。

例。

1つの元のページと1つのバリエーションをテストするとします。

次のように割り当てます。

元のページ：50%
バリエーション1：50%

これにより、両方のエクスペリエンスに同じ割合のトラフィックが割り当てられ、バランスよく比較できます。

トラフィックを不均等に割り当てることもできます。

例。

元のページ：70%
バリエーション1：30%

この方法は、新しいデザインをより多くの訪問者に表示する前に、少数のオーディエンスを対象としてテストする場合によく使用されます。

自動での割り当て（多腕バンディット）

自動での割り当てでは、多腕バンディット方式を使用し、テスト中にトラフィックの割り当てを動的に調整します。

テストが進むにつれて、PageSenseは成果の高いバリエーションにより多くの訪問者を自動的に割り当て、成果の低いバージョンへのトラフィックを減らします。これにより、テストの完了を待たずに、テスト中のコンバージョンを最大化できます。

例。

ランディングページの3つのバリエーションをテストするとします。

初期段階では、すべてのバージョンにトラフィックが均等に割り当てられます。

結果が得られると、PageSenseはバリエーション2のコンバージョンが他より大幅に多いことを特定し、他のバリエーションへのトラフィックを減らしながら、バリエーション2に割り当てる訪問者を徐々に増やします。

自動での割り当てを使用するケース

次の場合は、自動での割り当てを使用します。

完全に均等なテストを実施することよりも、コンバージョンの最大化を重視する場合。
PageSenseでトラフィックの割り当てを自動的に最適化する場合。
成果の低いバリエーションが訪問者に表示される機会を減らす場合。

テスト方法の設定

テスト方法によって、PageSenseが成果を評価し、統計的な信頼度を算出する方法が決まります。

［ベイズ法］

［頻度法］

ベイズ法

ベイズ法では、確率に基づいてテストを分析します。

あるバリエーションが別のバリエーションを上回るかどうかを単に判定するのではなく、そのバリエーションの成果が高くなる確率を算出します。

この方法では、多くの場合、有用な分析結果をより早く得られ、ほとんどのビジネスユーザーにとって結果を容易に解釈できます。

例。

バリエーションBがバリエーションAを上回る確率が92%と示された場合、一定のテスト期間が経過するのを待たずに、改善の可能性を高い信頼度で把握できます。

メリット。

迅速な意思決定
確率に基づく分析結果
結果を容易に解釈可能
ほとんどの最適化テストに対応

頻度法

頻度法では、統計的有意性と信頼度のしきい値を使用してテスト結果を評価します。

ベイズ分析とは異なり、この方法で信頼できる結論を導き出すには、十分なサンプルサイズとテスト期間が必要です。

例。

バリエーションの統計的有意性が95%に達した場合、観測された改善が偶然に発生した可能性は低いと判断できます。

メリット。

広く受け入れられている統計的手法
正式なテストプログラムに対応
信頼度に基づく確実な検証

統計的有意水準

頻度法を使用する場合、PageSenseが勝者となるバリエーションを特定するために必要な信頼度のしきい値を設定できます。

［迅速な傾向分析］

［最適］

［高精度］

［迅速な傾向分析］

迅速な傾向分析では、必要な信頼度を低くすることで、方向性をすばやく把握できます。

この選択肢は、初期段階のパフォーマンス傾向を特定する場合に役立ちます。

適している用途。

探索的なテスト
初期デザインの検証
短期間で繰り返すテスト

［最適］

最適では、テストの速度と結果の精度を両立できます。

この選択肢はほとんどのビジネステストに適しており、通常はこの設定を推奨します。

適している用途。

ランディングページの最適化
コンバージョン率の最適化
ユーザーエクスペリエンスのテスト

［高精度］

高精度では、勝者を判定するために、より高い統計的信頼度が必要です。

この設定では誤検出の可能性を抑えられますが、テスト期間が長くなる場合があります。

適している用途。

影響の大きいビジネス上の意思決定
売上に直結するテスト
大規模な最適化施策

テストの有効化方法

有効化方法では、訪問者にテストを適用するタイミングを指定します。

［ページの読み込み時に有効にする］

［手動で有効にする］

［条件を満たすときに有効にする］

［ページの読み込み時に有効にする］

対象ページが読み込まれると、テストがすぐに実行されます。最も一般的に使用される有効化方法です。

例。

訪問者がホームページにアクセスすると、割り当てられたバリエーションがすぐに表示されます。

［手動で有効にする］

個別の実装によって手動で有効にした場合にのみ、テストが実行されます。この選択肢を使用すると、バリエーションを表示するタイミングを細かく制御できます。

例。

特定のアプリケーションイベントが発生した後に、開発者がテストを有効にします。

［条件を満たすときに有効にする］

事前に設定した条件を満たした後にのみ、テストが実行されます。これにより、訪問者の行動やページの状態に基づいてエクスペリエンスを表示できます。

例。

訪問者がページの半分までスクロールするか、特定の要素を操作した後にのみ、バリエーションを実行します。

［ヒートマップを有効にする］

すべてのテストバリエーションで訪問者の反応データを自動収集するには、ヒートマップを有効にします。

ヒートマップを使用すると、訪問者が各バリエーションにどのように反応しているかを把握でき、テスト結果を分析する際の補足情報も得られます。

ヒートマップデータから、次の情報を確認できます。

クリック行動
スクロール行動
訪問者のエンゲージメント傾向
関心を集めている領域
反応が少ない領域

例。

バリエーションBでは、バリエーションAよりも多くのコンバージョンが発生しています。

ヒートマップを確認すると、配置を変更した行動喚起ボタンに訪問者がより頻繁に反応していることがわかり、パフォーマンスが改善した理由を把握できます。

スケジュール設定

スケジュールを設定すると、テストを開始および終了するタイミングを制御できます。

特定のキャンペーン、プロモーション、季節イベント、または管理されたテスト期間中にテストを実行する必要がある場合は、スケジュールを設定します。

［後でこのテストを実行する］

指定した将来の日付と時間にテストを自動的に開始する場合は、この選択肢を有効にします。

例。ブラックフライデー用のテストを数日前に設定し、プロモーションの開始時に自動的に実行されるようスケジュールを設定します。

［開始日］

テストを有効にするタイミングを指定します。設定した開始日と時間より前にアクセスした訪問者は、テストの対象にはなりません。

［終了日］

実行中のテストを自動的に停止するタイミングを指定します。

終了日に達すると訪問者の参加が終了し、新しいテストデータは収集されなくなります。

例。1週間のキャンペーン期間中のパフォーマンスを評価するため、2026年3月24日午後1時51分から2026年3月31日午後1時51分までテストを実行するようスケジュールを設定します。

ベストプラクティス

トラフィックを均等に割り当てる必要がある場合は、手動での割り当てを使用します。
テスト中のコンバージョンを最大化することが優先される場合は、自動割り当てを使用します。
組織のテスト運用に適した統計手法を選択します。
ほとんどのテストでは、最適な有意性設定を使用します。
行動に関する追加の分析情報が必要な場合は、ヒートマップを有効にします。
主要なキャンペーンや商品の提供開始に合わせて、テストのスケジュールを設定します。
テストの開始後は、設定を変更しないでください。

このドキュメントは、すべての手順をご案内できるよう構成されています。さらにサポートが必要な場合や質問がある場合は、support@zohopagesense.com - までお気軽にお問い合わせください。いつでもサポートいたします。