A/B-testkalkulator

Dette verktøyet evaluerer et eksperiment med to varianter (kontroll A vs variant B) ut fra bare besøkende og konverteringer per gruppe. Det beregner hver gruppes konverteringsrate, den relative økningen, en z-skår og p-verdi for to andeler, et 95 % konfidensintervall for differansen, og en signifikanskonklusjon ved 0.05-terskelen, og anbefaler deretter om du bør lansere varianten, beholde kontrollen eller fortsette å teste.

1. I Kontroll A-kortet skriver du inn Besøkende og Konverteringer. 2. I Variant B-kortet skriver du inn Besøkende og Konverteringer. 3. Klikk Beregn. Ugyldige inndata blokkeres med toasts: besøkende må være > 0, konverteringer ≥ 0, og konverteringer kan ikke overstige besøkende. 4. Les konverteringsrater, økning, z-skår, p-verdi, konfidens, 95 % KI, og merket Signifikant / Ikke signifikant med anbefalingen. Tilbakestill tømmer skjemaet.

rateA = konverteringerA / besøkendeA; rateB = konverteringerB / besøkendeB. Standardfeil seA = sqrt(rateA × (1 − rateA) / besøkendeA), seB tilsvarende. z = (rateB − rateA) / sqrt(seA² + seB²). p-verdi = 2 × (1 − Φ(|z|)) ved bruk av en Abramowitz-Stegun-tilnærming av den normale CDF-en. konfidens = (1 − pValue) × 100. økning = (rateB − rateA) / rateA × 100 (0 når rateA er 0). 95 % KI for differansen = (rateB − rateA) ± 1.96 × sqrt(seA² + seB²). Signifikant når pValue < 0.05; anbefalingen er keepTesting med mindre den er signifikant, da variantWins hvis lift > 0 ellers controlWins.