Ab-Test-Berechnungsprogramm

Dieses Tool wertet ein Experiment mit zwei Varianten (Kontrolle A gegen Variante B) allein anhand der Besucher und Konvertierungen pro Gruppe aus. Es berechnet die Konvertierungsrate jeder Gruppe, den relativen Lift, einen zweiseitigen z-Score und p-Wert, ein 95 %-Konfidenzintervall für die Differenz sowie eine Signifikanzentscheidung beim Schwellenwert 0,05 und empfiehlt dann, ob die Variante eingeführt, die Kontrolle beibehalten oder weiter getestet werden soll.

1. Geben Sie in der Karte Kontrolle A die Besucher und Konvertierungen ein. 2. Geben Sie in der Karte Variante B die Besucher und Konvertierungen ein. 3. Klicken Sie auf Berechnen. Ungültige Eingaben werden mit Toasts blockiert: Besucher müssen > 0 sein, Konvertierungen ≥ 0 und Konvertierungen dürfen die Besucher nicht übersteigen. 4. Lesen Sie Konvertierungsraten, Lift, z-Score, p-Wert, Konfidenz, das 95 %-KI sowie das Signifikant / Nicht signifikant-Badge mit seiner Empfehlung. Zurücksetzen leert das Formular.

rateA = conversionsA / visitorsA; rateB = conversionsB / visitorsB. Standardfehler seA = sqrt(rateA × (1 − rateA) / visitorsA), seB analog. z = (rateB − rateA) / sqrt(seA² + seB²). p-Wert = 2 × (1 − Φ(|z|)) mit einer Abramowitz-Stegun-Näherung der Normal-CDF. confidence = (1 − pValue) × 100. lift = (rateB − rateA) / rateA × 100 (0, wenn rateA 0 ist). 95 %-KI für die Differenz = (rateB − rateA) ± 1,96 × sqrt(seA² + seB²). Signifikant, wenn pValue < 0,05; Empfehlung ist keepTesting, außer wenn signifikant, dann variantWins, falls lift > 0, sonst controlWins.