A/B-test-kalkylator

Det här verktyget utvärderar ett experiment med två varianter (kontroll A vs variant B) utifrån bara besökare och konverteringar per grupp. Det beräknar varje grupps konverteringsgrad, den relativa lyften, ett z-värde och p-värde för två proportioner, ett 95 % konfidensintervall för skillnaden och ett signifikansutslag vid tröskeln 0,05, och rekommenderar sedan om du ska lansera varianten, behålla kontrollen eller fortsätta testa.

1. I kortet Kontroll A anger du Besökare och Konverteringar. 2. I kortet Variant B anger du Besökare och Konverteringar. 3. Klicka på Beräkna. Ogiltiga inmatningar blockeras med toast-meddelanden: besökare måste vara > 0, konverteringar ≥ 0, och konverteringar kan inte överstiga besökare. 4. Läs konverteringsgrader, lyft, z-värde, p-värde, konfidens, det 95 % konfidensintervallet och märkningen Signifikant / Inte signifikant med dess rekommendation. Återställ rensar formuläret.

rateA = conversionsA / visitorsA; rateB = conversionsB / visitorsB. Standardfel seA = sqrt(rateA × (1 − rateA) / visitorsA), seB analogt. z = (rateB − rateA) / sqrt(seA² + seB²). p-värde = 2 × (1 − Φ(|z|)) med en Abramowitz-Stegun-approximation av normalfördelningens CDF. konfidens = (1 − pValue) × 100. lyft = (rateB − rateA) / rateA × 100 (0 när rateA är 0). 95 % KI för skillnaden = (rateB − rateA) ± 1,96 × sqrt(seA² + seB²). Signifikant när pValue < 0,05; rekommendationen är keepTesting om inte signifikant, sedan variantWins om lyft > 0 annars controlWins.