Mainoslaskimet100% ilmainen
A/B-testilaskin, tilastollinen merkitsevyys
Selvitä, ovatko A/B-testisi tulokset tilastollisesti merkitseviä. Tiedä, milloin sinulla on todellinen voittaja ja voit luottavaisesti skaalata parempaa variaatiota.
Syötä testitulokset
Variantti A (kontrolli)
Variantti B (testi)
Testitulokset
Otoskoon laskin
Arvioi, kuinka monta vierailijaa tarvitset per variantti ennen testin aloittamista.
Otoskokosuositus
A/B-testilaskimen UKK
Tilastollinen merkitsevyys tarkoittaa, että variaatioiden välinen ero ei todennäköisesti johdu sattumasta. Tulos katsotaan yleensä merkitseväksi 95 %:n luottamustasolla, tämä tarkoittaa, että on vain 5 %:n mahdollisuus, että ero on satunnainen.
Yleisesti ottaen tarvitset vähintään 1 000 vierailijaa per variantti merkityksellisiä tuloksia varten. Tarkka määrä riippuu lähtötason konversioprosentistasi ja pienimmästä havaittavasta vaikutuksesta. Pienemmät erot vaativat enemmän dataa.
Aja testejä vähintään 1-2 täyden liiketoimintasyklin ajan (tyypillisesti 2-4 viikkoa), vaikka saavuttaisit merkitsevyyden aiemmin. Tämä huomioi viikonpäivävaikutukset ja liikennevaihtelut. Älä koskaan keskeytä testiä ennenaikaisten tulosten perusteella.