A/B-Tests – Best Practices

Zu testende Hypothese festlegen

Vor dem Einrichten eines A/B-Tests musst Du festlegen, was getestet werden soll und wie dies die Entwicklung deiner Anzeigenstrategie unterstützt. Mithilfe dieser Hypothese kannst du die zu testende Variable bestimmen und so sicherstellen, dass du einen aussagekräftigen A/B-Test ausführst.

Testgruppen mit stark unterschiedlichen Variablen festlegen

Bei der Auswahl der Testvariablen solltest du darauf achten, dass sich die Einstellungen für die beiden Testgruppen deutlich unterscheiden. Es sollten klare Unterschiede bestehen, damit die beiden Anzeigengruppen unterscheidbare Ergebnisse liefern und das System die beste Anzeigengruppe ermitteln kann.

Angemessene Testbudgets zuweisen

Das Budget für deinen A/B-Test sollte ausreichend Ergebnisse liefern, damit du auch wirklich die Strategie mit der besten Performance bestimmen kannst. Beim Erstellen eines A/B-Tests zeigt das System die geschätzte Testleistung auf Grundlage des von dir festgelegten Budgets an. Wähle dein Budget so, dass die geschätzte Testleistung als ausreichend bewertet wird.

Angemessene Testdauer festlegen

Für möglichst zuverlässige Ergebnisse empfehlen wir eine Testdauer von mindestens 7 Tagen. Die maximale Dauer für A/B-Tests beträgt 30 Tage. Eine Testdauer von unter sieben Tagen reicht möglicherweise nicht aus, um die beste Anzeigengruppe zu ermitteln. Eine übermäßig lange Testdauer kann zu einem Budgetdefizit führen.

Eine große Zielgruppe festlegen

Es wird empfohlen, die Zielgruppe zu erweitern, damit die Stichprobe für den A/B-Test ausreichend groß ist.

Einen höheren geschätzten Leistungswert sicherstellen

Mit dem Power-Wert wird angegeben, wie wahrscheinlich mögliche Unterschiede bei deiner Anzeigengruppe erkannt werden können. Dadurch bestimmst du deine Chance, ein erfolgreiches Ergebnis zu finden. Wir empfehlen ein Budget mit einem Power-Wert von mindestens 80 %.

Änderungen während des Tests vermeiden

Wenn du nach dem Start deines A/B-Tests Änderungen an deiner Anzeigengruppe vornimmst, kann sich das auf die Ergebnisse auswirken oder dazu führen, dass die Anzeigengruppe erneut überprüft wird. Deshalb solltest du deine Einstellungen für den A/B-Testnachträglich nicht mehr ändern.