Proč hádání selhává a testování vítězí
Proto hádání selhává. Bez testování nedokážete oddělit signál od šumu. Nepoznáte, jestli změna opravdu něco pohnula, nebo jestli vidíte běžné kolísání. Měsíce zkoušíte změny, které nefungují. A přicházíte o změny, které fungují, protože je vrátíte zpět v domnění, že nezabraly.
A/B testování tohle řeší tím, že odstraňuje nejasnost. Jednu změnu vyzkoušíte na polovině návštěvnosti. Druhou polovinu necháte beze změny. Rozdíl změříte přesně. Statistika vám řekne, jestli je rozdíl skutečný, nebo jde o náhodu. Přestanete hádat. Začnete vědět.
Čím A/B testování ve skutečnosti je
Verze A proti verzi B
A/B testování porovnává dvě verze něčeho tak, že je ukážete různým lidem a změříte, která si vede lépe. Verze A je váš současný stav. Verze B je vaše změna. Verzi A zobrazíte padesáti procentům návštěvníků. Verzi B těm zbývajícím padesáti procentům. Všechno ostatní je stejné. Jediný rozdíl je to jedno, co jste změnili.
Změřit a porovnat
Až obě verze uvidí dost návštěvníků, výsledky vyhodnotíte. Konvertovala verze B lépe než verze A. O kolik. Je ten rozdíl skutečný, nebo jen náhodné kolísání. Na tyto otázky přesně odpoví statistika.
Skutečná síla: přesnost
Právě přesnost je ta skutečná síla. Ne samotné testování. Přesnost. Víte přesně, co funguje u vašeho konkrétního publika, na vašem konkrétním webu, v konkrétní době. Obecné rady z jiných webů se vás netýkají. Vaše data ano.
Skrytá cena hádání
Jedna špatná změna stojí měsíce tržeb
Řekněme, že máte na každém zákazníkovi sto dolarů zisku. Váš web má deset tisíc návštěvníků měsíčně. Dvě procenta To je dvě stě zákazníků měsíčně. Dvacet tisíc dolarů zisku za měsíc.
Myslíte si, že by změna mohla pomoct. Provedete ji bez testování. Pokud změna ve skutečnosti sníží konverzi o jedno procento, získáte už jen sto zákazníků. Zisk klesne na deset tisíc dolarů. Ten měsíc jste přišli o deset tisíc dolarů.
Tiché ztráty se sčítají
Možná si toho nevšimnete. Možná si řeknete, že tržby jsou tento měsíc nižší z jiných důvodů. Špatnou změnu necháte na místě. Další měsíc totéž. Ztráta deset tisíc dolarů. Za rok jste přišli o sto dvacet tisíc dolarů, protože jste netestovali.
To je skrytá cena hádání. Nejde o občasné špatné rozhodnutí. Jde o stálé drobné škody ze změn, které trochu uškodí nebo trochu pomůžou, ale nikdy nevíte, co je co.
Testování brání tichým ztrátám
Testování tomu brání. Jedna špatná změna se zachytí. Vidíte, že je horší. Vrátíte ji. Jedna ztráta místo dvanácti.
Co odlišuje vítěze od ostatních
Velké firmy testují neustále
Velké firmy testují neustále. Největší internetové obchody provedou za rok tisíce testů. Testují streamovací služby. Testují cestovní platformy. Testují proto, že testování se skládá. Jedno procento zlepšení měsíčně se za rok složí na dvanáct procent. Pět procent zlepšení měsíčně se za rok složí na osmdesát procent.
Malé firmy testují zřídka
Malé a střední firmy testují zřídka. Myslí si, že testování je pro technologické firmy s vývojáři. Hádají. Pomalu přicházejí o peníze a nevědí proč.
Výhodou je testování
Vítězí firmy, které testují víc než jejich konkurence. Ne chytřejší. Ne lepší. Jen víc testování. To je vše. Testování je návyk, ne dovednost. Zvládne ho každý.
Testování proti měnění
Měnit znamená hádat
Měnit znamená hádat. Něco změníte. Podíváte se, jestli tržby vzrostly. Pokud ano, změnu necháte. Pokud ne, vrátíte ji zpět. Trvá to měsíce. Nemáte ponětí, jestli výsledek způsobila ta změna. Můžete vrátit vítěznou změnu jen proto, že jste měli smůlu s načasováním.
Testovat znamená vědět
Testovat znamená vědět. Měníte systematicky. Měříte před a po přesně. Statistika vám řekne, jestli změna měla smysl. Víte to hned. Za dobu, kterou zabere jedno hádání, zvládnete desítky testů.
Většina firem mění bez testování. Několik jich testuje. Testující porážejí hádající.
Mýty, které zabíjejí testovací programy
Testování trvá příliš dlouho
Omyl. Většina testů skončí za jeden až dva týdny. Pokud váš test trvá tři měsíce, nemáte dost návštěvnosti. Ale to je problém s návštěvností, ne s testováním.
Testování je drahé
Omyl. Testování je zdarma nebo levné. Některé nástroje jsou zdarma. Placené platformy začínají zhruba na pěti stech dolarech měsíčně. To jsou drobné ve srovnání s dopadem na tržby. Jeden test, který zvýší konverzi o jedno procento, zaplatí nástroje na celý rok.
Testovat mohou jen velké weby
Omyl. Testování funguje na každém webu s alespoň pěti sty návštěvníky měsíčně. Většina webů tuto hranici překračuje. Weby malých firem z testování těží nejvíc, protože malá zlepšení jsou pro ně velkým procentuálním ziskem.
Je potřeba dokonalé nastavení
Omyl. Dobré nastavení poráží dokonalé plánování. Začněte testovat dnes s jednoduchým nastavením. Postup vylepšujte, jak se budete učit.
Závazek, na kterém záleží
Testování vytváří hodnotu, jen když vítěze nasadíte
Nejde o to, jak testovat, ale co uděláte s vítěznými testy. Některé firmy testují, ale vítěze nikdy nenasadí. Spustí test. Vyhraje nová varianta. Řeknou, že ji nasadí později. Později nikdy nepřijde.
Vítězné testy vytvářejí hodnotu, jen když je nasadíte. A vítězné testy inspirují navazující testy. Pokud změna barvy tlačítka zvýší konverzi o dvě procenta, co velikost tlačítka. Umístění tlačítka. Text tlačítka. Jeden test vede k dalšímu. Testování není jednorázové. Je průběžné.
Skládání díky odhodlání
Z testování nejvíc těží firmy, které se zavážou vítěze nasazovat a spouštět navazující testy. Testování zabudují do kultury. Měsíc po měsíci. Rok po roce. Malá zlepšení se složí v obrovský růst.
Často kladené otázky
Jak poznám, že je moje firma dost velká na A/B testování?
Pokud máte pět set návštěvníků měsíčně, testovat můžete. Většina firemních webů tuto hranici překračuje. Pokud jste pod pěti sty, soustřeďte se nejdřív na návštěvnost. Jakmile pět set dosáhnete, začněte testovat. S Tvůrcem webů WEMASY to nastavíte přímo na svém webu.
Prodávám drahé produkty a mám málo zákazníků. Můžu i tak testovat?
Je to těžší, ale možné. Čas se počítá jinak. S jedním zákazníkem měsíčně trvá test měsíce. Platí ale stejný princip. Testujte změny s velkým dopadem. Vyhněte se změnám s malým dopadem, které se při vašem objemu neprojeví.
Jaký je rozdíl mezi testem, který vyhraje, a testem, kde vítěz selže?
Nasadíte vítěze. Jeden měsíc funguje. Druhý měsíc už tak dobře ne. To se stává. Něco se změnilo. Posunulo se publikum. Sezónní vliv. Spusťte test znovu. Vítěz se může obrátit. Zapište si, co jste se tím dozvěděli.
Mám testovat na stálých zákaznících, nových zákaznících, nebo na obou?
Testujte na všech. Chovají se jinak, ale obě skupiny pro firmu znamenají hodně. Noví zákazníci jsou první dojem. Stálí zákazníci jsou věrnost. Testujte na všech. Pokud chcete detail, analyzujte skupiny potom zvlášť.
Právě běží můj test a výrazně prohrávám. Mám ho ukončit dřív?
Ne. Nechte test doběhnout celou dobu. Včasné výsledky jsou zavádějící. Dívejte se na to, jako byste test nespouštěli vy. Představte si, že na něm nemáte žádný zájem. Chtěli byste po týdnu znát předběžné výsledky. Nejspíš ne. Počkejte na skutečná data.
Jak přesvědčím svůj tým, aby testoval místo hádání?
Ukažte peníze. Spusťte test. Vyhraje nová varianta. Spočítejte dopad na tržby. Tento test zvýšil tržby o pět tisíc dolarů měsíčně. Pokud průměrný test přinese zlepšení o tři procenta, můžeme to složit v obrovský růst. Peníze přesvědčí.