A/B-tester ska inte avslutas på magkänsla. Den här kalkylatorn räknar ut om skillnaden mellan din original (A) och din utmanare (B) är statistiskt säkerställd, så att du vet när ett resultat är värt att lita på.
A/B-test: är resultatet statistiskt säkerställt?
Fyll i besökare och konverteringar för variant A (original) och B (utmanare). Beräkningen görs i din webbläsare och sparas inte.
Metod: tvåsidigt z-test för två andelar, signifikansnivå 95 procent (p under 0,05). Ett signifikant resultat betyder att skillnaden sannolikt inte beror på slumpen, inte att den är affärsmässigt stor.
Så tolkar du resultatet
Ett statistiskt säkerställt resultat betyder att skillnaden sannolikt inte beror på slumpen. Det säger däremot inget om hur stor effekten är i kronor. Väg alltid signifikansen mot upliften och mot hur länge testet har körts. Korta tester med få konverteringar ger ofta osäkra resultat även när konverteringsgraderna ser olika ut.
Vanliga misstag att undvika
- Att stoppa testet så snart det ser signifikant ut. Att tjuvkika och avbryta tidigt ökar risken för falska positiva.
- Att köra många varianter samtidigt utan att ta hänsyn till det i bedömningen.
- Att dra slutsatser av för få konverteringar, oavsett hur stor den synliga skillnaden är.
Kalkylatorn använder ett tvåsidigt z-test för två andelar med signifikansnivån 95 procent. Allt räknas ut i din webbläsare och inga siffror sparas.