Signifikanskalkylator
Beräkningen använder ett tvåsidigt z-test för två proportioner. Signifikans betyder inte automatiskt affärsnytta – läs tolkningshjälpen nedan.
Så tolkar du resultatet
- p-värde under 0,05 = mindre än 5 % risk att skillnaden är slump, givet att varianterna egentligen är likvärdiga. Det är den vanligaste tröskeln (95 % konfidens).
- Signifikant ≠ klart. Låt testet gå hela affärscykler (minst 1–2 hela veckor) även om signifikansen kommer tidigt – annars fångar du veckodagseffekter.
- Kika inte för ofta. Att stoppa testet första gången p kryper under 0,05 ("peeking") ger kraftigt förhöjd risk för falska vinnare. Bestäm testlängd i förväg.
- Signifikant ≠ lönsamt. En vinst på ett mikromål (klick) kan vara neutral eller negativ på köp och intäkt. Mät alltid effekten på det mål som styr affären.
Hur många besökare behöver testet?
En grov tumregel för nödvändig storlek per variant: 16 × p × (1 − p) / (p × MDE)², där p är din baslinje-konverteringsgrad och MDE den minsta relativa förbättring du vill kunna upptäcka. Exempel: baslinje 2 % och MDE 10 % ger ca 39 000 besökare per variant. Det är därför sajter med låg trafik ofta gör bättre i att arbeta med strukturerade förbättringar än A/B-tester – något vi går igenom i guiden om en snabb konverteringsaudit.
Osäker på vad ni borde testa först – eller om ni ens har trafik nog att testa? Det svarar en kostnadsfri audit på. Läs mer om hur vi arbetar med konverteringsoptimering.