Ein A/B-Test vergleicht zwei Varianten einer Anzeige, E-Mail oder Webseite anhand eines zuvor festgelegten Ziels. Besucher werden möglichst zufällig auf die Varianten verteilt. So lässt sich prüfen, ob eine Änderung tatsächlich mit besseren Ergebnissen zusammenhängt.
Wie ein A/B-Test funktioniert
Formulieren Sie zuerst eine konkrete Hypothese, etwa: Eine verständlichere Nutzenbeschreibung erhöht die Zahl qualifizierter Anfragen. Legen Sie die Hauptkennzahl, die erforderliche Stichprobe und die Laufzeit vor dem Start fest. Verändern Sie möglichst nur einen wesentlichen Bestandteil.
Als Hauptziel eignet sich zum Beispiel der Anteil gültiger Anfragen. Ergänzende Kennzahlen wie Erreichbarkeit und Terminquote zeigen, ob eine Variante tatsächlich bessere Kontakte bringt. So wird der Test mit dem späteren Vertriebsergebnis verbunden.
Praxisbeispiel: zwei Einstiege für eine Angebotsseite
Ein Fensterbetrieb testet auf seiner Angebotsseite zwei Überschriften. Beide Varianten erhalten vergleichbaren Traffic. Bewertet wird der Anteil gültiger Beratungsanfragen, nicht nur die Zahl der Klicks auf den Formularbutton.
Ein rein hypothetisches Rechenbeispiel: Variante A erzielt bei 1.000 Sitzungen 30 gültige Anfragen, Variante B bei 1.000 Sitzungen 40. Die beobachteten Raten liegen bei drei und vier Prozent. Dieser Unterschied allein beweist noch keinen belastbaren Vorteil; dafür sind Stichprobe, Unsicherheit und Testplanung zu berücksichtigen.
Worauf Sie bei der Umsetzung achten sollten
Beenden Sie den Test nicht nach den ersten wenigen Abschlüssen. Wochentage, kleine Stichproben und gleichzeitige Änderungen können das Ergebnis verzerren. Prüfen Sie außerdem, ob mehr Anfragen mit gleichbleibender Qualität entstehen.
Dokumentieren Sie, welche Variante jeder Gruppe gezeigt wurde und welche Leads daraus entstanden sind. Schließen Sie interne Testanfragen und bekannte Dubletten nach denselben Regeln aus. Nach einer Entscheidung sollten Sie kontrollieren, ob sich der Effekt im laufenden Betrieb bestätigt.
FAQ
Was unterscheidet einen A/B-Test von einem Vorher-nachher-Vergleich?
Beim A/B-Test laufen die Varianten gleichzeitig unter möglichst vergleichbaren Bedingungen. Ein Vorher-nachher-Vergleich kann zusätzlich durch Saison, Budget oder Änderungen der Nachfrage beeinflusst werden.
Welche Änderungen eignen sich für den Einstieg?
Geeignet sind klar begründete Änderungen an Überschrift, Nutzenbeschreibung oder Formularablauf. Eine Hypothese sollte erklären, welches konkrete Hindernis die Änderung beseitigen soll.
Wie lange sollte ein A/B-Test laufen?
Dafür gibt es keine allgemeine Mindestdauer. Die benötigte Laufzeit hängt unter anderem von Besucherzahl, Ausgangsrate und dem Unterschied ab, den Sie verlässlich erkennen möchten.