A/B testování

1. A/B testování
Tomáš Růžička
VIVmail.cz
5. 11. 2015

2. Tomáš Růžička
cz.linkedin.com/in/tomasmarketing | @Tomas_Ruza
- VIVmail.cz
- Conrad.cz
- Fotolab.cz, Fotostar, Foto.cz (CeWe Color)
- Mironet.cz
- Alza.cz
Online celkem cca 11 let. Nejradši mám e-mailing.
Spoluzakladatel e-shopů:
Myslivecky-obchod.cz, Hrackolend.cz, Bezkrabice.cz (prodáno)

3. Agenda
1. Wireframe
2. Reálné ukázky A/B testů z praxe
3. A/B testy ze zahraničí
4. Co A/B testovat

4. Wireframe

5. Wireframe – drátěný model
Balsamiq Mockups – balsamiq.com

6. Příklad double opt-in
Balsamiq Mockups – balsamiq.com

7. Wireframe – drátěný model
Balsamiq Mockups – balsamiq.com

8. Proč drátěný model
Balsamiq Mockups – balsamiq.com
1) Finální úspora času, pokud chyby v textech či rozložení
odladíte na začátku, ušetříte hodně práce ve finální
korektuře, také grafikovi a kodérovi
2) Pokud děláte korekturu v týmu, textové úpravy v Balsamiq
jsou výrazně jednodušší než finální úpravy v kódu či v grafice
3) Dokážete si ukládat šablony a finální tvorba podkladů se
výrazně zrychluje. Navíc kompletní myšlenku dokážete
dotáhnout se zadavatelem a kolegy

9. Finální ukázka
Welcome proces

10. Reálné ukázky
A/B testů z praxe

11. 2011 2012 2013/2014
Openrate: 16,89%
Click rate: 3,75%
CVR: 0,79%
Četnost: 2 týdně
Openrate: 22,62%
Click rate: 4,08%
CVR: 1,17%
Četnost: 2 týdně
Openrate: 29,88%
Click rate: 5,48%
CVR: 1,11%
Četnost: 2/3 týdně
Testování hlavičky v e-mailu
Openrate: 26,89%*
Click rate: 4,47%
CVR: 1,29%
Četnost: 2/3 týdně
2015
*Chybí vánoční sezona
+ Seznam.cz novinka

12. Co se testovalo - hlavička
Začínali jsme
proužkem s logem…
Poté jsme testovali
kompletní hlavičku

13. Pořád testování hlavičky
TIP: nezapomínejte v e-mailech na PREHEADER

14. Mobilní verze
Testovali jsme různé responzivní verze… Toto je finální šablona, která v A/B testech
finálně zvítězila jak na obrat, tak clickrate… Nemají responzivní web!
Finální responzivní verze

15. Finální responzivní verze
Responzivní i v Gmail App pro android!

16. A/B test – Silverpop IBM Marketing Cloud

17. A/B test – Silverpop IBM Marketing Cloud

18. A/B test – Silverpop IBM Marketing Cloud

19. A/B test – Silverpop IBM Marketing Cloud

21. A/B testy
ze zahraničí

22. Fab - optimizely.com +48 %
Zdroj: https://s3.amazonaws.com/optimizely-marketing/customer-stories/fab-casestudy.pdf
Originál
Verze 1. Verze 2.

23. NuFace – vwo.com
Zdroj: https://vwo.com/blog/free-shipping-threshold-increases-aov/#4bE3QbJ3xqICXl2r.99%20
+90 %

24. Spreadshirt – optimizely.com
Zdroj: https://blog.optimizely.com/2013/11/26/spreadshirt_redesign_case_study/
+606 %

25. A/B test David C. Cook
Zdroj: http://bombbomb.com/blog/video-email-work-case-study/
+114 %

26. Arenaturist.com
Zdroj: http://www.carmelon-digital.com/articles/ab-test-case-study-arenaturist/
+34.5 %

27. A/B test Caffeine

28. A/B test Caffeine

29. A/B test textace
Zdroj: http://unbounce.com/a-b-testing/failed-ab-test-results/
-25 %

30. SIMS 3
Zdroj: http://www.widerfunnel.com/case_study/the-sims-3-doubles-game-registrations-by-identifying-the-most-compelling-offer/
128 %

31. Express Watches UK
Zdroj: https://vwo.com/blog/increase-in-sales/
107 %

32. Mall.cz
Zdroj: https://vwo.com/blog/larger-product-images-increase-conversion-rate/
9 %

33. Co A/B testovat
1) Textace
tlačítka, nadpisy, předměty atd…
2) Barvy a kontrasty
3) Rozložení, uvažujte v mřížce

34. Děkuji
Děkujeme za pozornost