AB testování je nejexaktnější metoda pro vyhodnocování změn, kterými chcete vylepšit obchodní výkon eshopu. Možná už testujete nebo se k tomu už už chystáte a pak se vám bude hodit výčet chyb, kterých se je dobré při AB testování vyvarovat. Vyhněte se slepým cestám, které jsme prozkoumali za vás.
Přednáška, která vám ukáže široký pohled na PPC kampaně. Víte, proč kampaně nemusí vydělávat? Chyba někdy nebývá jen na straně PPC specialisty. PPC jsou krásné v tom, že pomáhají propagovat, prodávat a také odhalovat případné chyby produktu.
Přednáška, která vám ukáže široký pohled na PPC kampaně. Víte, proč kampaně nemusí vydělávat? Chyba někdy nebývá jen na straně PPC specialisty. PPC jsou krásné v tom, že pomáhají propagovat, prodávat a také odhalovat případné chyby produktu.
5 Ways to Grow Faster Through User RetentionAutopilot
Try Autopilot free for 30 days: https://autopilothq.com/free-trial.html
Your churn rate is arguably the most important metric for measuring growth. With the rise of single click sign ups and frictionless purchasing power, companies today are having a harder time keeping customers than they are acquiring them—meaning a focus on retention is more paramount than ever for any growth model. Behavior-based emails and in-product engagement through a marketing automation tool is a scalable way to automate retention initiatives, increase customer satisfaction, reduce time to close, and ultimately grow faster.
This is the presentation from our first London workshop featuring Martyn Davies (Programme Director at Ignite Accelerator), Guy Marion (CMO & Growth at Autopilot) and Dylan Damsma (Customer Enablement Manager at Autopilot).
You'll learn 5 proven approaches for retaining customers through automation, including how to:
-Onboard and reactivate new users through product and timed messages
-Enable inactive or struggling users
-Reactivate users who have not logged in for 30+ days (SaaS example)
-Reactivate past buyers who have not purchased for 90 days (E-commerce example)
-Educate customers through best practice content and training
Affiliate konference - Pokročilá optimalizace PPC reklamy na FacebookuSun Marketing
Přednáška Jirky Pokorného z 8. ročníku Affiliate konference. Pokud chcete na web přivést levnou a kvalitní návštěvnost, může být PPC na Facebooku tím ideálním nástrojem. Uvedená prezentace se nesnaží komplexně pojednávat o pokročilé optimalizaci reklamních kampaní a spíš se zaměřuje na základní tipy, čemu při nastavování a optimalizaci kampaní směrovaných na web věnovat pozornost.
Digitální exportní akademie - Den 2 - See-Think-Do-Care - Případová studie Un...Sun Marketing
Naše část přednáškového programu druhého dne Digitální exportní akademie, pořádané ve spolupráci Google a CzechTrade. Představení komunikační a obsahové strategie See-Think-Do-Care a ukázka exportní PPC kampaně pro našeho klienta, společnost Union pojišťovna.
Petr Hovorka / BrandBakers - Employer Branding WorkshopPetr Hovorka
Že nás čeká nový pracovní trh, není žádná novinka. Na trhu práce bude v následujících letech výrazně méně ekonomicky aktivních lidí, budou ho utvářet noví kandidáti s jinými preferencemi (zástupci generace Y), v náborové komunikaci se prosadí nové komunikační technologie a nástroje (po-ma-lin-ku se vždy dostávají z marketingu do HR komunikace), na trhu bude nová konkurence "moderních" zaměstnavatelů nabízejících flexibilní pracovní úvazky apod.
Na novém pracovním trhu, se podle mého názoru, nábor změní v přitahování (Recruitment =>>> Attractment), ve kterém budou hrát prim prostředky k budování vztahů, jak se současnými zaměstnanci tak s kandidiáty, svět, ve kterém bude vítězit strategie pull nad strategií push. Nabídka bude v rukách kandidátů, nikoli společností jako tomu bylo dosud. Dramatická změna, že ano?
Tomáš Baťa říkal: "Chcete-li dosáhnout věcí, kterých jste ještě nikdy nedosáhli, musíte začít dělat věci, které jste ještě nikdy nedělali." A jednou z takových nových "věcí" pro získávání zaměstnanců je koncept značky zaměstnavatele.
O čem workshop je?
Co to vlastně je značka zaměstnavatele
Proč se pustit do budování zaměstnavatelské značky
Jak si obhájit investici před finančním či generálním ředitelem
Co zmůže a na co je krátká
Jaké ingredience a tým budete potřebovat
Jak se peče - nahlédneme do jednotlivých kroků projektu
Nejlepšími příklady ze světa náborové komunikace
Marketing & Media Club VŠE - Případová studie HBOSun Marketing
HBO dříve využívalo hlavně tradiční způsoby nákupu reklamy, tedy televize, print, outdoor, případně nákup bannerů napřímo. Reklama na internetu tvořila spíše doplněk. Postupně se z ní však stal nástroj, kterému se věnuje nejvíce času, peněz a kde se postupně vyzkoušelo snad všechno co v online reklamě jde. Dneska je jejich účet díky tomu pravidelně zařazován do beta-testů reklamních systémů a my tak máme společně možnost zkoušet nástroje, ke kterým ostatní budou mít přístup později. Ukážeme vám, jak to vypadá, když se dělají kampaně s milionovým rozpočtem. Prezentace ukazuje kampaň k seriálu Mamon a aplikaci frameworku See-Think-Do-Care v praxi.
IVT GEO 312 C - tepelné čerpadlo země/voda Marek Bláha
Švédské tepelné čerpadlo země/voda s plynulým řízením výkonu pro rodinné domy a menší objekty. Vestavěný nerezový zásobník teplé vody. Vysoký topný faktor SCOP 5,6.
Potřebujete si doplnit některá fakta z webináře "Naučte se používat zákaznické recenze tak, aby zvýšily důvěryhodnost a prodej vašeho e-shopu"? Všechny informace najdete v této prezentaci.
Online marketing vám může pomoci. Musíte ho ovšem dělat správným způsobem. Prezentace vás upozorní na časté chyby živnostníků a firem. Dozvíte se, jak změna jednoho tlačítka pomohla vydělat 300 milionů dolarů a další zajímavosti. Autor přednášky: Radim Hasalík, přednáška pro účastníky semináře v Informačním centru Prahy 5.
PPC Restart 2022: Jan Kvasnička - Zvyšujte výkon kampaní díky optimalizaci vs...Taste
Určitě to znáte, máte klienta, který má super produkt, ale jeho web/e-shop pokulhává ve zpracování. Jak s tímto webem/e-shopem dosáhnout nejlepších výsledků? V přednášce se prakticky podíváte na tipy a ukázky toho, jak můžete ovlivnit konverzní poměr webu/e-shopu, a na co všechno si dát pozor. Kolikrát má i drobná úprava velký vliv na konverzní poměr. Honza pro vás nachystal i checklist, ve kterém se dozvíte, jak postupovat, pokud přijímáte nového klienta, a co všechno zkontrolovat.
Investujte do PPC chytře a s rozvahou. Přednáška Radka Swaczyny v rámci konference Maraton e-commerce vědomostí od společnosti NetDirect ze dne 5.6.2012.
Sklik - pokročilé optimalizační metody (E-SHOPVÍKEND 2015)Petr Pavelek
Sklik - pokročilé optimalizační metody
31.7.2015
E-SHOPVÍKEND 2015
#esv15
Přemýšlíte, jak z vašich PPC kampaní dostat maximum? Petr Pavelek Vám ukáže jak se vyhnout častým chybám e-shopů v Skliku. Představí vám pokročilé optimalizační metody, práci s retargetingem včetně importéru publik a řeč bude také o novinkách v Skliku.
#ESSE18 - Pavel Šíma - Atribuce pro e-shopy: Jak ji jednoduše využívají pro z...E-shop_summit_cz
Atribuce už dávno není doménou pouze pro webové analytiky a data scientisty. Doba se posunula. Data jsou dostupná a postupy známé.
Dnes může i CEO nebo marketingový manažer dělat významná rozhodnutí nad atribucí, která mohou e-shopu přinést zvýšení návratnosti investic až o 50 %.
Rozumět všem algoritmům není nutné.
5 Ways to Grow Faster Through User RetentionAutopilot
Try Autopilot free for 30 days: https://autopilothq.com/free-trial.html
Your churn rate is arguably the most important metric for measuring growth. With the rise of single click sign ups and frictionless purchasing power, companies today are having a harder time keeping customers than they are acquiring them—meaning a focus on retention is more paramount than ever for any growth model. Behavior-based emails and in-product engagement through a marketing automation tool is a scalable way to automate retention initiatives, increase customer satisfaction, reduce time to close, and ultimately grow faster.
This is the presentation from our first London workshop featuring Martyn Davies (Programme Director at Ignite Accelerator), Guy Marion (CMO & Growth at Autopilot) and Dylan Damsma (Customer Enablement Manager at Autopilot).
You'll learn 5 proven approaches for retaining customers through automation, including how to:
-Onboard and reactivate new users through product and timed messages
-Enable inactive or struggling users
-Reactivate users who have not logged in for 30+ days (SaaS example)
-Reactivate past buyers who have not purchased for 90 days (E-commerce example)
-Educate customers through best practice content and training
Affiliate konference - Pokročilá optimalizace PPC reklamy na FacebookuSun Marketing
Přednáška Jirky Pokorného z 8. ročníku Affiliate konference. Pokud chcete na web přivést levnou a kvalitní návštěvnost, může být PPC na Facebooku tím ideálním nástrojem. Uvedená prezentace se nesnaží komplexně pojednávat o pokročilé optimalizaci reklamních kampaní a spíš se zaměřuje na základní tipy, čemu při nastavování a optimalizaci kampaní směrovaných na web věnovat pozornost.
Digitální exportní akademie - Den 2 - See-Think-Do-Care - Případová studie Un...Sun Marketing
Naše část přednáškového programu druhého dne Digitální exportní akademie, pořádané ve spolupráci Google a CzechTrade. Představení komunikační a obsahové strategie See-Think-Do-Care a ukázka exportní PPC kampaně pro našeho klienta, společnost Union pojišťovna.
Petr Hovorka / BrandBakers - Employer Branding WorkshopPetr Hovorka
Že nás čeká nový pracovní trh, není žádná novinka. Na trhu práce bude v následujících letech výrazně méně ekonomicky aktivních lidí, budou ho utvářet noví kandidáti s jinými preferencemi (zástupci generace Y), v náborové komunikaci se prosadí nové komunikační technologie a nástroje (po-ma-lin-ku se vždy dostávají z marketingu do HR komunikace), na trhu bude nová konkurence "moderních" zaměstnavatelů nabízejících flexibilní pracovní úvazky apod.
Na novém pracovním trhu, se podle mého názoru, nábor změní v přitahování (Recruitment =>>> Attractment), ve kterém budou hrát prim prostředky k budování vztahů, jak se současnými zaměstnanci tak s kandidiáty, svět, ve kterém bude vítězit strategie pull nad strategií push. Nabídka bude v rukách kandidátů, nikoli společností jako tomu bylo dosud. Dramatická změna, že ano?
Tomáš Baťa říkal: "Chcete-li dosáhnout věcí, kterých jste ještě nikdy nedosáhli, musíte začít dělat věci, které jste ještě nikdy nedělali." A jednou z takových nových "věcí" pro získávání zaměstnanců je koncept značky zaměstnavatele.
O čem workshop je?
Co to vlastně je značka zaměstnavatele
Proč se pustit do budování zaměstnavatelské značky
Jak si obhájit investici před finančním či generálním ředitelem
Co zmůže a na co je krátká
Jaké ingredience a tým budete potřebovat
Jak se peče - nahlédneme do jednotlivých kroků projektu
Nejlepšími příklady ze světa náborové komunikace
Marketing & Media Club VŠE - Případová studie HBOSun Marketing
HBO dříve využívalo hlavně tradiční způsoby nákupu reklamy, tedy televize, print, outdoor, případně nákup bannerů napřímo. Reklama na internetu tvořila spíše doplněk. Postupně se z ní však stal nástroj, kterému se věnuje nejvíce času, peněz a kde se postupně vyzkoušelo snad všechno co v online reklamě jde. Dneska je jejich účet díky tomu pravidelně zařazován do beta-testů reklamních systémů a my tak máme společně možnost zkoušet nástroje, ke kterým ostatní budou mít přístup později. Ukážeme vám, jak to vypadá, když se dělají kampaně s milionovým rozpočtem. Prezentace ukazuje kampaň k seriálu Mamon a aplikaci frameworku See-Think-Do-Care v praxi.
IVT GEO 312 C - tepelné čerpadlo země/voda Marek Bláha
Švédské tepelné čerpadlo země/voda s plynulým řízením výkonu pro rodinné domy a menší objekty. Vestavěný nerezový zásobník teplé vody. Vysoký topný faktor SCOP 5,6.
Potřebujete si doplnit některá fakta z webináře "Naučte se používat zákaznické recenze tak, aby zvýšily důvěryhodnost a prodej vašeho e-shopu"? Všechny informace najdete v této prezentaci.
Online marketing vám může pomoci. Musíte ho ovšem dělat správným způsobem. Prezentace vás upozorní na časté chyby živnostníků a firem. Dozvíte se, jak změna jednoho tlačítka pomohla vydělat 300 milionů dolarů a další zajímavosti. Autor přednášky: Radim Hasalík, přednáška pro účastníky semináře v Informačním centru Prahy 5.
PPC Restart 2022: Jan Kvasnička - Zvyšujte výkon kampaní díky optimalizaci vs...Taste
Určitě to znáte, máte klienta, který má super produkt, ale jeho web/e-shop pokulhává ve zpracování. Jak s tímto webem/e-shopem dosáhnout nejlepších výsledků? V přednášce se prakticky podíváte na tipy a ukázky toho, jak můžete ovlivnit konverzní poměr webu/e-shopu, a na co všechno si dát pozor. Kolikrát má i drobná úprava velký vliv na konverzní poměr. Honza pro vás nachystal i checklist, ve kterém se dozvíte, jak postupovat, pokud přijímáte nového klienta, a co všechno zkontrolovat.
Investujte do PPC chytře a s rozvahou. Přednáška Radka Swaczyny v rámci konference Maraton e-commerce vědomostí od společnosti NetDirect ze dne 5.6.2012.
Sklik - pokročilé optimalizační metody (E-SHOPVÍKEND 2015)Petr Pavelek
Sklik - pokročilé optimalizační metody
31.7.2015
E-SHOPVÍKEND 2015
#esv15
Přemýšlíte, jak z vašich PPC kampaní dostat maximum? Petr Pavelek Vám ukáže jak se vyhnout častým chybám e-shopů v Skliku. Představí vám pokročilé optimalizační metody, práci s retargetingem včetně importéru publik a řeč bude také o novinkách v Skliku.
#ESSE18 - Pavel Šíma - Atribuce pro e-shopy: Jak ji jednoduše využívají pro z...E-shop_summit_cz
Atribuce už dávno není doménou pouze pro webové analytiky a data scientisty. Doba se posunula. Data jsou dostupná a postupy známé.
Dnes může i CEO nebo marketingový manažer dělat významná rozhodnutí nad atribucí, která mohou e-shopu přinést zvýšení návratnosti investic až o 50 %.
Rozumět všem algoritmům není nutné.
Optimalizace pro vyhledávače - case study - SANTESun Marketing
Pro společnost SANTÉ s.r.o. působící v segmentu zdravotnické péče jsme zajistili optimalizaci webové prezentace, jejímž cílem bylo zvýšit návštěvnost na relevantní klíčová slova a zlepšit umístění webu na zvolená klíčová slova ve vyhledávačích Seznam.cz a Google.cz. Jak jsme si vedli? Dozvíte se v následující případové studii.
Prezentace k webináři. Webinář "5 skrytých sil PPC reklamy" Vám poskytne v průběhu 60-minut informace o tom, jak PPC reklama může změnit celou Vaši online marketingovou strategii, zvýšit viditelnost Vaší firmy či značky vůči novému publiku a zcela zásadně změnit způsob, jakým měříte konverzi. Dozvíte se také rady o tom, jak zjistit, co dělá Vaše konkurence v oblasti online marketingu.
Více informací o tom, jak Vám WSI může pomoci v oblasti PPC reklamy, najdete na našich webových stránkách, konkrétně na http://www.wsimarketing.cz/marketing-ve-vyhledavacich/ppc-reklama/
Jak nastavit procesy v digitální analytice tak, aby vám generovala výnosyRobertNemec.com
Digitální analytika (dříve webová analytika) představuje způsob, jak kontinuálně zvyšovat ziskovost vašeho webu a vašich (nejen online) reklamních kampaní.
Bohužel většina firem zatím zaměňuje digitální analytiku za reporting: místo toho, aby zjišťovaly informace, na základě kterých pak budou stále vylepšovat svůj web a reklamní kampaně, jenom sbírají data.
Účelem této přednášky Roberta Němce z digitální agentury RobertNemec.com bylo ukázat, jak začít pracovat s digitální analytikou na každodenní bázi a jak nastavit procesy, aby digitální analytika začala být prudce zisková.
Jak zvýšit výkon PPC účtu e-shopu o desítky procentPetr Pavelek
Prezentace v rámci ShopCamp 2014.
Nejste spokojeni s návratností investic do PPC? Zajímá vás jak dostat vaše kampaně na vrchol? Odneste si žhavé novinky a tipy jak vytěžit maximum z Skliku! Přidejte se a Petr Pavelek, který má zkušenosti se stovkou významných klientů včetně e-shopů vám ukáže jak na to!
Petr Pavelek: Jak zvýšit výkon PPC účtu e-shopu o desítky % během 45 minut (S...Shopcamp 2014
Nejste spokojeni s návratností investic do PPC? Zajímá vás jak dostat vaše kampaně na vrchol? Odneste si žhavé novinky a tipy jak vytěžit maximum z Skliku! Přidejte se a Petr Pavelek, který má zkušenosti se stovkou významných klientů včetně e-shopů vám ukáže jak na to! Účast na workshopu doporučuji účastníkům, kteří již mají zkušenosti se správou PPC. Na konci workshopu bude prostor pro případnou osobní konzultaci nebo diskuzi.
2. Poměr mezi průběžnými náklady na placené přivádění návštěvníků (PPC)
a investicemi pro zlepšování obchodní výkonosti webu (CRO: UX + SEO + copy)
Zdroj: Bryan Eisenberg 2012 a H1.cz 2015
100 : 1
3. DLOUHODOBÝMI CÍLI PROCESU CRO JE PŘEDEVŠÍM:
• Zvyšování počtu konverzí (objednávky, newsletter, registrace, wishlist…)
• Snižování Bounce rate (míra okamžitého opuštění webu)
• Zlepšování přirozené nalezitelnosti stránek (SEO)
• Snižování investic do reklamy
• Posilování značky a vztahu se zákazníkem
8. CHYBY IDEOVÉ A PRINCIPIÁLNÍ
• Netestování
• Neochota riskovat neúspěch
• Testování zbytečných a malicherných věcí
9.
10.
11. CHYBY IDEOVÉ A PRINCIPIÁLNÍ
• Netestování
• Neochota riskovat neúspěch
• Testování zbytečných a malicherných věcí
• Test bez jasně formulované hypotézy a odpovídajících KPI
12. CHYBY TECHNICKÉ
• Kolize scriptů
• Špatná distribuce verzí
• Blikání a zpožděné překreslování
• Neexistující nebo špatné propojení na Google Analytics
19. CHYBY VYHODNOCOVÁNÍ
• Důvěra pouze v jeden nástroj
• Nevhodný počet účastníků testu
• Nevhodné KPI a příliš úzký pohled na výsledky
20.
21. A: Nic B: Bestseller C: Personalizovaná nabídka dle chování návštěvníka
22. Varianta Celkový obrat Prům. hodnota objednávky Transakční poměr
A: none - - -
B: bestsellers - 10,69 % - 4,43 % - 5,36 %
C: Persoo + 16,08 % + 15,94 % + 2,68 %
Po prvním měsíci jsme variantu Bestsellers vypnuli.
23. Varianta Celkový obrat Prům. hodnota objednávky Transakční poměr
A: none - - -
B: bestsellers - 10,69 % - 4,43 % - 5,36 %
C: Persoo + 16,08 % + 15,94 % + 2,68 %
Po prvním měsíci jsme variantu Bestsellers vypnuli.
OBRAT:
+ 12,57 %
Průměrná hodnota
objednávky:
+ 7,39 %
Transakční poměr:
+ 4,25 %
Průměrný počet druhů
zboží v košíku:
+ 12,25 %
Rozdíl Personalizované nabídky za dva měsíce AB testu.
24. CHYBY VYHODNOCOVÁNÍ
• Důvěra pouze v jeden nástroj
• Nevhodný počet účastníků testu
• Nevhodné KPI a příliš úzký pohled na výsledky
• Souběžné testy
Každý chybuje, nebojme se to přiznat. Ostatně právě neschopnost přiznat si chybu, vede k neschopnosti se z vlastní chyby poučit. A to je velká chyba…
V roce 2012 publikoval Bryan Eisenberg výsledky studie, ve které uváděl poměr 92:1. My jsme vzali klientská data za loňský rok v agentuře H1.cz. Ve skutečnosti ten poměr může být ještě větší, protože v agenturách tohoto typu se na klienty stále vyvíjí tlak, aby část nákladů byla přesunuta do CRO, obrovské spendy na PPC tečou mimo agentury. A menší eshopy, když už vydávají na on-line nějaké peníze, investují takřka výhradně do PPC.
CRO je proces, který je průběžně vyhodnocován – TO JE DŮLEŽITÉ.
Netestovat, pokud na to máme návštěvnost resp. dostatečný počet konverzí, je chyba. Budete tak upravovat web jen na základě dojmů.
Neochota riskovat neúspěch – prameny ze světa říkají, že zhruba jeden test z deseti je taková pecka, že zaplatí těch devět nepřesvědčivých či dokonce neúspěšných. My máme v Čechách úspěšnost zhruba 50-60%.
Ukážu vám jeden neúspěšný test.
U jednoho klienta, prodávajícím sportovní oblečení a vybavení, jsme se rozhodli začít testovat. Navrhl jsem pro začátek na zahřátí jednoduchý test ověřující následující hypotézu:
Písmenko S, v pravém horním rohu je pro zákazníky nerozpoznatelné jako ikona označující slevu. Zaměňují to za značku velikosti oblečení a mají pocit, že už je to jen v esku a proto nenakupují.
Navrhli jsme velkou výraznou a explicitní nálepku s vyznačením slevy. Výsledek byl katastrofa.
-- Celý příběh s poučením –
Nebojte se riskovat neúspěch!
Test zbytečných a malicherných věcí – tohle je tenký led zkušenosti. Jeden náš klient testuje nesmysly, jen aby nedošlo k propadu, nikoli k vylepšení.
Další malichernost - Testy tlačítek Koupit. vs,. Vložit… ale bez prvotní zkušenosti bychom nevěděli, že je to zbytečné testovat.
Testujte spíš zásadnější změny.
Ukázka testování kompletní změny layoutu Basecamp Highrise: Výrazné zeštíhlení obsahu, zjednodušení. Navýšení o více než sto procent.
A ukázka chyby - pokus vrátit do nového layoutu všechen ten původní obsah.
Test bez jasně formulované hypotézy a odpovídajících KPI – vždy si řekněte, čeho konkrétně se má změnou dosáhnout. Netestujte „jestli tohle nebude náhodou lepší“
K vhodným KPI, tedy vyhodnocovaným cílům, se dostaneme ještě v části o chybách vyhodnocování.
Kolize scriptů – příběh o znemožnění se přihlásit.
Špatná distribuce verzí – např. zapomenutá testovací IP adresa.
Blikání a zpožděné překreslování stránky druhou verzí – špatné umístění kódu nástroje, musí být na stránce zpracováván jako první, tedy ne do patičky. Rozhodně ne přes GTM.
Nepropojení na GA – nebudete mít v čem data ověřit a příp. doměřit na dalších segmentech.
Znáte to okřídlené „nevěřím statistice, kterou si sám nesfalšuji“…
Nevhodný počet účastníků testu – to se týká jak počtu příliš malého, tak vzorku příliš velkého. Příklad Heureka na Svět bot – rok trvající test. Za měsíc nedochází k příliš velké chybě způsobené tím, že návštěvníci přicházejí z různých zařízení. Během roku je to zcela jiné. Počítač doma, v práci, telefon, jiný browser, vymazaná cache…
Jak zjistit hrubý počet účastníků testu?
Jednou z možností je AA test. Postavíte proti sobě dvě naprosto stejné varianty webu. Výkon by pochopitelně měl být stejný.
Jak ale vidíte, tak výkon se sjednotí teprve v čase s určitým množstvím účastníků testu, ze začátku hraje obrovskou roli náhoda.
Na horním grafu vidíte, že v půlce testu se konverzní poměr lišil o 25%, to bylo při třiceti tisících návštěvníků na variantu. Hodnoty konverzního poměru se sjednotily až na čtyřiceti pěti tisících návštěvníků.
Na dolním grafu je pak vidět, jak se i na tak velkém obrovském vzorku liší výkon e-commerce na stejných variantách.
Metrika Revnue per visitor vám sama o sobě neřekne, jestli vzrostl konverzní poměr, nebo průměrná hodnota objednávky nebo obojí. Pouze s dalšími metrikami má její vyhodnocení smysl.
Buďte obezřetní v tom, co a jak interpretujete.
Ukázka nevhodně zvoleného KPI –Visual Website Optimizer publikoval case study, která představovala AB test, spočívající v odstranění drop-down menu.
Pár odborníků se výsledků chytlo a pokládají to za důkaz, že drop-down menu jsou zlo.
Nechci se bavit o drop-down menu, pouze o číslech, která nám sděluje tento konkrétní test. Testem prošlo na každé z variant tři tisíce unikátních návštěvníků. To je podle mne zoufale málo.
Konverzní poměr se liší o pouhých deset konverzí, tedy každá další konverze mění zásadně procentuální rozdíl konverzního poměru a pochopitelně i obrat na zákazníka.
Test byl vyhodnocen na základě metriky Revenue per visitor, i když ostatní metriky nedosáhly statistické průkaznosti.
Věřím, že navigace může mít vliv na konverzní poměr. Ale není mi příliš jasné, jaký vliv má pouhé odstranění navigace na průměrnou hodnotu objednávky.
Ještě jedna ukázka fixace na nesprávné KPI - Tohle je další test, který jsme udělali pro eshop Hanibal, tenokrát ve spolupráci s personalizačním nástrojem Persoo.
Pokud si uživatel vložil zboží do košíku, tak se původně nedělo nic. My jsme navrhli, že by se mohla v té chvíli zobrazit vrstva, ve které by se zákazníkům nabídlo nějaké další zboží.
Bé varianta nabízela zboží jen na základě bestsellerů, prostě to obecně nejlépe prodávané s největší šancí , že zaujme někoho dalšího.
Cé varianta nabízela zboží na základě personalizované nabídky, tedy podle nákupní a návštěvnické historie zákazníka a chování typově podobných zákazníků.
Test jsme po měsíci provozu vyhodnotili a zjistili, že varianta Bé, tedy nabídka nejpopulárnějšího zboží prostě nefunguje. Pokles byl ve všech metrikách. Variantu jsme tedy vypnuli a nechali test běžet další měsíc.
Po dalším měsíci jsme test znovu vyhodnotili. Celkové výsledky jasně ukázaly, že přidání personalizované nabídky dalšího zboží mělo jednoznačně úspěch.
Pokud ale budete studovat ty dvě tabulky podrobněji, zjistíte, že jak v metrice obratu, tak u průměrné hodnoty objednávky se v druhém měsíci té personalizované variantě dařilo hůř než první měsíc. Ta čísla jsou průměr za dva měsíce, tedy druhý měsíc byl výrazně horší. Co vzrostlo, byl počet transakcí. Počet objednávek od vracejících se zákazníků, tedy lze říci, že vzrostla zákaznická spokojenost.
Pamatujte tedy na to, že vyhodnocování úprav pouze na základě revenue může být zavádějící a nemusí přinést komplexní pohled na všechny dopady změny.
Souběžné testy – pokud mají společné KPI (např. dokončení objednávky), tak se navzájem varianty ovlivňují a výsledky jsou znehodnocené. Nicméně myslím, že by se souběžným testům mělo vyhýbat úplně.
15% úspěšných testů se nezrealizuje!
Kdo nic nedělá, nic nezkazí, ale ani nic nezíská. Nebojte se testovat, nebojte se dělat chyby. Je to klišé, ale jen tak se budete posunovat dál.