Jak A/B test funguje v praxi
Řekněme, že chcete zjistit, zda zelené nebo oranžové CTA tlačítko přinese více konverzí. Vytvoříte dvě verze stránky — identické kromě barvy tlačítka. Testovací nástroj automaticky zobrazí 50 % návštěvníků verzi A (zelené) a 50 % verzi B (oranžové). Po dosažení statisticky významného vzorku (typicky stovky až tisíce konverzí) porovnáte výsledky. Pokud oranžové tlačítko má konverzní poměr 4,2 % oproti 3,1 % u zeleného, máte jasného vítěze.
Co všechno můžete testovat
Testovat můžete prakticky cokoli: nadpisy (různé formulace hodnotové nabídky), texty CTA tlačítek, barvy a velikosti tlačítek, délku formulářů, rozmístění prvků na stránce, obrázky vs. video, cenovou prezentaci nebo množství textu. Klíčové pravidlo je testovat vždy jen jednu změnu najednou. Pokud změníte nadpis i tlačítko i obrázek současně, nevíte, co způsobilo rozdíl. Pro testování více změn najednou existuje multivariantní testování.
Nástroje pro A/B testování
Mezi populární nástroje patří Google Optimize (zdarma, ale ukončený v 2023), VWO, Optimizely a AB Tasty. Pro menší projekty lze A/B testy implementovat přímo v kódu pomocí feature flagů nebo nástrojů jako Vercel Edge Config, který umožňuje testování na úrovni serveru bez negativního dopadu na rychlost. V Appitectu dokážeme nastavit A/B testování přímo v Next.js aplikaci s vyhodnocením v Google Analytics 4.
Statistická významnost
Největší chybou při A/B testování je předčasné ukončení testu. Pokud po 50 návštěvnících vidíte rozdíl, neznamená to, že je reálný — může jít o náhodu. Pro spolehlivý výsledek potřebujete statistickou významnost alespoň 95 %, což typicky vyžaduje stovky konverzí v každé variantě. Test by měl běžet minimálně 1–2 týdny, aby zachytil různé dny v týdnu a eliminoval sezónní výkyvy.
Praktický příklad
Pro e-shop s doplňky stravy jsme testovali dvě varianty produktové stránky. Verze A měla klasický layout s fotkou produktu vlevo a popisem vpravo. Verze B měla nad fotkou banner „Nejprodávanější produkt — 2 400+ spokojených zákazníků“ a pod cenou countdown timer s omezenou slevou. Po 3 týdnech a 1 200 konverzích měla verze B o 34 % vyšší konverzní poměr. Roční dopad? Přibližně 2,1 milionu Kč navíc v tržbách — z jednoho testu.