Kalkulačka A/B testu
Nástroj porovná variant A a B podľa návštev a konverzií. Zobrazí konverzné pomery, absolútny rozdiel, relatívne zlepšenie, istotu výsledku aj víťazný variant.
Výsledok A/B testu
víťaz B
Zadajte návštevy a konverzie pre variant A aj B. Kalkulačka porovná konverzné pomery a ukáže orientačnú istotu výsledku.
Variant A
Variant B
A/B test vyhodnocujte opatrne. Výsledok je orientačný a závisí od veľkosti vzorky, kvality merania, rovnakého rozdelenia návštevnosti, dĺžky testu a toho, či test nebol ukončený príliš skoro.
Kalkulačka A/B testu porovnáva dva varianty podľa návštev a konverzií. Hodí sa pri testovaní titulkov, landing page, tlačidiel, formulárov, cien, reklamných kreatív alebo e-mailových kampaní.
Vyhodnotenie A/B testu podľa návštev a konverzií
Kalkulačka A/B testu je určená na porovnanie dvoch variantov podľa toho, koľko mali návštev a koľko z nich prinieslo konverziu. Hodí sa pri testovaní landing page, titulkov, tlačidiel, formulárov, cien, reklamných kreatív alebo e-mailových kampaní. Pomáha rýchlo zistiť, či má lepší výsledok variant A alebo variant B a aký veľký je medzi nimi rozdiel.
Výpočet pracuje so štyrmi vstupmi. Pre variant A sa zadáva počet návštev a počet konverzií. Rovnaké údaje sa zadávajú aj pre variant B. Z týchto hodnôt kalkulačka vypočíta konverzný pomer oboch variantov, teda podiel konverzií z návštev. Ak napríklad variant získal 100 konverzií z 2000 návštev, jeho konverzný pomer je 5 %.
Vo výsledkoch sa zobrazí konverzný pomer A, konverzný pomer B, absolútny rozdiel v percentuálnych bodoch, relatívne zlepšenie, orientačná istota výsledku a orientačný víťaz. Absolútny rozdiel ukazuje priamy rozdiel medzi konverznými pomermi. Relatívne zlepšenie zase ukazuje, o koľko percent je jeden variant lepší oproti druhému podľa zadaných dát.
Na výsledok má najväčší vplyv počet návštev, počet konverzií a veľkosť rozdielu medzi variantmi. Malý rozdiel pri nízkej návštevnosti nemusí stačiť na spoľahlivé rozhodnutie. Naopak, väčší rozdiel pri väčšej vzorke môže pôsobiť presvedčivejšie. Kalkulačka preto okrem víťaza zobrazuje aj vyhodnotenie, napríklad či je výsledok sľubný, pomerne istý alebo ešte nie je dostatočne istý.
Praktický príklad je testovanie dvoch verzií tlačidla na stránke. Variant A má 2000 návštev a 100 konverzií, variant B má 2000 návštev a 128 konverzií. Kalkulačka ukáže konverzný pomer 5 % pri variante A a 6,4 % pri variante B. Rozdiel je +1,4 percentuálneho bodu a relatívne zlepšenie vychádza +28 %, takže ako víťaz sa zobrazí variant B.
A/B test treba čítať opatrne, najmä ak má málo návštev alebo konverzií. Výsledok závisí od veľkosti vzorky, kvality merania, rovnakého rozdelenia návštevnosti, dĺžky testu a od toho, či test nebol ukončený príliš skoro. Kalkulačka pomáha s rýchlym porovnaním dát, no pri dôležitých rozhodnutiach je vhodné pozerať sa aj na kontext kampane alebo stránky.
Časté otázky
Čo počíta kalkulačka A/B testu?
Porovnáva dva varianty podľa návštev a konverzií a vypočíta ich konverzné pomery, rozdiel, zlepšenie a víťaza.
Aké údaje treba zadať?
Pre každý variant treba zadať počet návštev a počet konverzií. Kalkulačka potom porovná variant A s variantom B.
Čo znamená relatívne zlepšenie?
Ukazuje, o koľko percent je konverzný pomer variantu B vyšší alebo nižší oproti variantu A.
Čo znamená absolútny rozdiel?
Absolútny rozdiel ukazuje rozdiel medzi konverznými pomermi variantov v percentuálnych bodoch.
Kedy brať výsledok A/B testu opatrne?
Najmä pri malej vzorke, krátkom teste alebo nízkom počte konverzií. Vtedy môže výsledok kolísať a oplatí sa nazbierať viac dát.