Kontrollvariante
Die Kontrollvariante ist die unveränderte Originalversion in einem A/B-Test, an der alle neuen Varianten gemessen werden.
Im Detail
Die Kontrolle dient dazu, die Wirkung einer Änderung zu isolieren. Da der Traffic gleichzeitig und zufällig zwischen Kontrolle und Herausforderer aufgeteilt wird, betreffen externe Faktoren wie Saisonalität, Werbeausgaben oder Wochentagsmuster beide Gruppen gleichermaßen, sodass der Unterschied im Ergebnis der Variante selbst zugeschrieben werden kann. Ohne eine parallele Kontrolle würden Sie diese Woche mit der letzten vergleichen, wo zahllose Störfaktoren jede Schlussfolgerung unzuverlässig machen.
In der Praxis ist die Kontrolle auch Ihr Sicherheitsnetz: Wenn jeder Herausforderer schlechter abschneidet, behalten Sie die bewährte Basislinie und verlieren nur das Testfenster. Ein häufiger Fehler ist, die Kontrolle während des Tests still zu ändern oder mit einem anderen Traffic-Anteil laufen zu lassen, was den fairen Vergleich zerstört. In einem Quiz-Funnel kann die Kontrolle Ihr aktuelles Lead-Formular sein, während Herausforderer weniger Felder testen, und nur eine stabile Kontrolle macht einen Uplift glaubwürdig.
Beispiel aus der Praxis
Häufig gestellte Fragen
Warum brauche ich eine Kontrollvariante?
Die Kontrolle liefert eine parallele Basislinie, sodass jeder Ergebnisunterschied Ihrer Änderung und nicht zeitlichen oder Traffic-Schwankungen zugeschrieben werden kann. Ohne sie verzerren äußere Faktoren leicht jeden Zeitvergleich.
Darf sich die Kontrolle während des Tests ändern?
Nein, das Ändern der Kontrolle während des Tests zerstört den Vergleich und macht die Ergebnisse ungültig. Sperren Sie die Kontrolle für die gesamte Laufzeit und aktualisieren Sie sie erst nach einem Gewinner.
Soll die Kontrolle gleichen Traffic erhalten?
In einem Standard-A/B-Test erhalten Kontrolle und Herausforderer meist gleiche Anteile für die schnellste, sauberste Auswertung. Ungleiche Aufteilungen senken das Risiko, brauchen aber mehr Gesamttraffic für Signifikanz.