Wie lange muss ein A/B-Test laufen?
Wie lange ein A/B-Test laufen muss: Dauer vorab festlegen, in ganzen Wochen testen und die kleinste messbare Änderung für 2, 4 und 8 Wochen durchrechnen.
Zum RatgeberGeben Sie ein, wie viele Personen den Test pro Woche sehen würden und wie oft sie konvertieren. Die Tabelle zeigt die kleinste Änderung, die ein Test jeder Länge erkennen kann.
Ein A/B-Test teilt Personen 50/50 zwischen dem Original (A) und einer Änderung (B). Der Rechner fragt, wie groß ein Unterschied sein muss, damit ein Test ihn vom Zufall unterscheiden kann, mit einem zweiseitigen Test bei 95 % Konfidenz und 80 % Power.
Er nutzt die Arkussinus-Methode, dieselbe Mathematik wie der Planer in MIRA FIVE: B muss eine Rate von sin²(asin√p + 1,4 × √(2 / n)) erreichen, wobei p die heutige Rate ist und n die Personen je Variante. Die kleinste Änderung ist diese Rate im Vergleich zu p.
Bei 4 % und 1.000 Personen pro Woche erkennt ein Test über 2 Wochen nur eine Änderung von etwa +70 %, über 4 Wochen etwa +48 %, über 8 Wochen etwa +33 %. Für +10 % bräuchte es etwa 39.400 Personen je Variante. Legen Sie die Länge vorher fest, lassen Sie ganze Wochen laufen und entscheiden Sie einmal am Ende.
Der Rechner nimmt an, dass jede Woche neue Personen kommen. Der Planer in MIRA FIVE rechnet mit Ihren eigenen letzten 28 Tagen, sodass wiederkehrende Personen einmal zählen.
In MIRA FIVE wählen Sie 2, 3, 4, 6 oder 8 Wochen, sehen vor dem Start, was der Test erkennen kann, und bekommen ein Ergebnis nach dem geplanten Ende samt Zeitfenster, am Ziel, das Sie gewählt haben.
Wie lange ein A/B-Test laufen muss: Dauer vorab festlegen, in ganzen Wochen testen und die kleinste messbare Änderung für 2, 4 und 8 Wochen durchrechnen.
Zum RatgeberKostenlos bis 25.000 Events im Monat. Ohne Kreditkarte.