スプリットテストのベストプラクティス

検証する仮説を決定する

スプリットテストを設定する前に、テスト事項を決定し、それがどのように広告戦略の決定に役立つかを判断します。仮説を立てることで、テストする変数に焦点を合わせ、「正常な」A/Bテストを設計および実施するのに役立ちます。

変数に大きな違いのあるテストグループを設定する

テスト変数を選択する際に、2つのグループの差異が大きくなるよう設定することをお勧めします。システムがより効果的な広告セットを決定できるよう、明確な差異を設定し、2つの広告セットが同様の結果を生成しないようにしてください。

適切なテスト予算を設定する

スプリットテストの予算は、充分な成果を生み出し、最も効果が高い広告戦略を自信をもって確定できるものでなければなりません。スプリットテストを作成すると、システムは設定された予算に基づいて予測テストパワーを提示します。予算が充分な予測テストパワーを示していることを確認してください。

適切なテスト期間を設定する

信頼度の高い結果が出るように、テスト期間は最低7日間設けることを推奨します。スプリットテストは、最大で30日間実施可能です。テスト期間が7日未満の場合、より効果的な広告セットを決定するために期間が充分ではない可能性がありますが、期間が長いテストは予算不足につながる可能性があります。

幅広いオーディエンスを設定する

スプリットテストを実施する際は、サンプルの不足を避けるため、オーディエンスを拡大することを推奨します。

より高いパワーバリューを確保する

パワーバリューとは最良の広告戦略を確定する上で決定的となる広告セット間における有意な差異を検出する可能性のことです。当社では80％以上のパワーバリューを確保できるように予算設定することを推奨しています。

テスト中の変更は避ける

スプリットテストの開始後に広告セットに変更を加えた場合、テスト結果に影響を与えたり、再度審査が必要になる恐れがあります。スプリットテストの開始後は、テスト設定を変更しないことを推奨します。