SlideShare a Scribd company logo
Dé aanpakvoorsuccesvolle A/B-testen!
Bezoek onze stand: A27
Wouter Wensing
Teamlead Conversion & Webanalytics
Webwinkel Vakdagen 2016| Jaarbeurs Utrecht| 20 januari 2016
Wouter Wensing
Teamlead Conversion&Webanalytics| ISM eCompany
w.wensing@ism.nl
linkedin.com/in/wouterwensing
ISM eCompany
2015 Teamlead Conversion& Webanalytics
2014 Webanalytics& conversie-optimalisatieconsultant
2012 Online marketingconsultant
Erasmus Universiteit Rotterdam
Arbeids-& OrganisatiePsychologie
jaar
e-Commerce experience
20+
100+
e-Marketing klantenSana & Magento Shops
500+
Design klanten
100+
Netherlands | USA | Indonesia| UK |
Belgium | Australia | Ukraine |
Sri Lanka | Austria
10offices
e-Commerce
specialisten
350+
Wij zijn trots om te werken voor
AGENDAAGENDA
Agenda
1. Wat is A/B-testen?
2. Waarom ga je A/B-testen?
3. Wanneer ga je A/B-testen?
4. De succesvolle aanpak voor A/B-testen
1. Wat is A/B-testen?
1. Opzet A/B test
1. Opzet A/B test
ORIGINEEL A
1. Opzet A/B test
VARIANT B
1. Opzet A/B test
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
Periode Conversiepercentage Verbetering
april 1%
mei ?
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
Periode Conversiepercentage Verbetering
april 1%
mei 1.5% +50%
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
Non-sale periode
2. Waarom ga je A/B-testen?
Sale periode
2. Waarom ga je A/B-testen?
Uitsluiten
 Sale
 Wijzigingeninonline/offlinecampagnes
 Wijzigingeninassortiment
 Overigewijzigingenaandewebshop
 Seizoensinvloeden
 Feestdagen
2. Waarom ga je A/B-testen?
ORIGINEEL A
VARIANT B
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
Learnings
2. Waarom ga je A/B-testen?
2. Waarom ga je A/B-testen?
ORIGINEEL A
VARIANT B
2. Waarom ga je A/B-testen?
Learningstoepassenbij
 GoogleAdwordsadvertenties
 Facebookadvertenties
 E-mailmarketingcampagnes
 USP’s vandewebshop
 Anderepaginatemplatesbinnendewebshop
 VolgendeA/Btests
3. Wanneer ga je A/B-testen?
Technologie
Functionaliteit
Usability
Intuïtie
Emotie Obstakels wegnemen
Hypotheses altijd A/B testen
Obstakels wegnemen
Hypotheses altijd A/B testenUnieke waarde propositie
Obstakels wegnemen
Hypotheses A/B testenof webshop direct aanpassen
Obstakels wegnemen
Webshop direct aanpassen
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak
voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
 63% van de bezoekers die de winkelmand bereiken, verlaat deze zonder verder te gaan met bestellen
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
 Voor diverse bezoekers bleek het niet duidelijk te zijn dat een account aanmaken niet verplicht is
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
 Diverse bezoekers lijken te twijfelen om door te gaan naar de checkout en verlaten de webshop
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
 Conversie expert reviewop basis van eigen expertise, gebruikersonderzoeken, best practices en...
4. De succesvolle aanpak voor A/B-testen
 ...Eerder uitgevoerde A/B tests
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
Verbeterpunten Pagina Device Analyse
Vermijd het gebruik van scrollbars bij filters
Dit is niet gebruiksvriendelijk, zeker niet bij tablets.Toon liever de belangrijkste merken
(minimaal 6, maximaal 10) en een ‘Toon meer’ button/tekstlink. Categoriepagina alle devices Expert review okt-15
Doorvoeren loyalty e-mail campagnes campagne alle devices Data Analyse
Vermeld prominent verzendkosten, levertijden en overige voorwaarden voor bestellen vanuit België en Duitsland
Plaats een duidelijke link of button naar een pagina met verzendkosten, levertijden, etc. voor in ieder geval België en Duitsland. Deze landen zijn verantwoordelijk voor zo’n 5% van de omzet en voor deze bezoekers moet
direct duidelijk zijn wat voor hen de voorwaarden zijn. Alle pagina's alle devices Expert review okt-15
AB test: Buttontekst aanpassen ‘Verder naar bestellen’
Wat met ‘Naar uw gegevens’ wordt bedoeld is mogelijk niet voor iedere bezoeker duidelijk. Een AB test kan uitwijzen of een buttontekst zoals ‘Verder/Doorgaan met bestellen’ tot een hoger doorklikratio leidt. Winkelmand alle devices Expert review okt-15
Toon een shop reviews widget, incl. klantcijfer en aantal beoordelingen
Toon een shop reviews widget waarbij minimaal één klantreview zichtbaar is. Winkelmand alle devices Expert review okt-15
Toon duidelijk een telefoonnummer van de klantenservice
De klantenservice verhoogt het conversiepercentage.Zorg dat het telefoonnummer en e-mailadres van de klantenservice
prominenter in beeld is, tezamen met de tijden waarop deze bereikbaar is. Winkelmand alle devices Expert review okt-15
Toon levertijd in de winkelmand
Geef de levertijd weer van de producten in de winkelmand Winkelmand alle devices Expert review okt-15
Klantbeoordelingen prominenter tonen, inclusief cijfer, boven de vouw (lieft in de header) Alle pagina's alle devices Heatmap analyse
Weergeven van Thuiswinkel Waarvorg logo boven de vouw (heaer)
Een bekend keurmerk versterkt het vertrouwen in de webshop, met name bij nieuwe bezoekers. Toon dit keurmerk daarom prominent op iedere pagina. Alle pagina's alle devices Expert review okt-15
Klantreviews (reviews over de shop zelf) + klantcijfer tonen
Toon deze prominent en dynamisch op de detailpagina. Productpagina alle devices Expert review okt-15
Micro-copywriting* onder bestelbutton
Een vlot bestelproces is altijd prettig voor bezoekers . Geef daarom onder de button middels micro-copywriting aan dat bij Jeroen Beekman snel besteld kan worden zonder een account aan te maken. Tip: Een A/B test kan
uitwijzen of deze tekst de CTR doet verhogen. Winkelmand alle devices Expert review okt-15
Toon tijdens het bestelproces altijd het betreffende besteloverzicht.
Zorg dat de artikelen die de bezoeker wil bestellen in een kort overzicht, tijdens het bestelproces altijd in beeld zijn.
Zo weet de bezoeker ten aller tijde wat hij straks gaat bestellen. Door dit overzicht sticky te maken,
blijft deze altijd zichtbaar wanneer naar beneden gescrold wordt. Checkout alle devices Expert review okt-15
Klantreviews (reviews over de shop zelf) + klantcijfer tonen
Toon deze prominent en dynamisch op de overzichtpagina, liefst met minimaal één klantreview. Categoriepagina alle devices Expert review okt-15
Toon productreviews (sterren)
Versterk hiermee de sociale bevestiging bij bezoekers en help ze hun keuze te vereenvoudigen. Categoriepagina alle devices Expert review okt-15
Prominent tonen shopreviews + cijfer.
Jeroen Beekman maakt gebruik van shopreviews, echter wordt dit niet duidelijk boven de vouw gecommuniceerd. Toon de gemiddelde klantbeoordeling promintent (in de header) inclusief cijfer en aantal beoordelingen. Homepage alle devices Expert review okt-15
Toon voorraadstatus in de winkelmand
Geef de voorraadstatus weer van de producten in de winkelmand en speel in op schaarste: “Nog 1 op voorraad!” Winkelmand alle devices Expert review okt-15
“Kassakoopjes” eenvoudig toevoegen aan winkelmand
Geef de mogelijkheid om “Kassakoopjes” (zoals waterdicht spray) direct toe te voegen aan
de winkelmand voor eenvoudige up-sell. Winkelmand alle devices Expert review okt-15
Toon de totale korting (indien aanwezig)
En geef aan dat deze al verrekend is. Geef bezoekers een ‘feel good’ gevoel door te laten zien wat zij besparen op hun bestelling Winkelmand alle devices Expert review okt-15
Vandaag besteld, actuele datum+tijdstip in huis.
Geef dynamisch aan wanneer de bezoeker zijn bestelling in huis heeft wanneer hij nu besteld om het gevoel van mentaal bezit nemen te versterken. Productpagina alle devices Expert review okt-15
Toon de best verkochte merken als eerst in het filter
Zodra de bezoeker kiest voor ‘Toon meer’, toon dan de producten op alfabetische volgorde. Zelfde
geldt voor categorieën. Categoriepagina alle devices Expert review okt-15
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
Hoeveelheid bezoekers Impact op conversie Moelijkheid
1 = heel weinig bezoekers
10 = heel veel bezoekers
1 = zeer lage impact
10 = zeer hoge impact
1 = zeer complex
10 = zeer eenvoudig
Prioriteit
Het gemiddelde van bovenstaande3
bepaalt de prioriteit én de A/B-test waar
je als eerste mee begint!
++
4. De succesvolle aanpak voor A/B-testen
Inzichten Pagina(groep) Verwachte
impact
Hoeveelheid
bezoekers
Moeilijkheid Prioriteit
Verbeterpunt A Winkelwagen 9 7 9 8,3
Verbeterpunt B Checkout stap 2 6 5 10 7,0
Verbeterpunt C Productdetailpagina’s 8 6 10 8,0
Verbeterpunt D Homepage 4 5 6 5,0
Verbeterpunt E Categoriepagina’s 7 8 2 5,7
4. De succesvolle aanpak voor A/B-testen
Inzichten Pagina(groep) Verwachte
impact
Hoeveelheid
bezoekers
Moeilijkheid Prioriteit
Verbeterpunt A Winkelwagen 9 7 9 8,3
Verbeterpunt C Productdetailpagina’s 8 6 10 8,0
Verbeterpunt B Checkout stap 2 6 5 10 7,0
Verbeterpunt E Categoriepagina’s 7 8 2 5,7
Verbeterpunt D Homepage 4 5 6 5,0
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
Technologie
Functionaliteit
Usability
Intuïtie
Emotie Obstakels wegnemen
Hypotheses altijd A/B testen
Obstakels wegnemen
Hypotheses altijd A/B testenUnieke waarde propositie
Obstakels wegnemen
Hypotheses A/B testenof webshop direct aanpassen
Obstakels wegnemen
Webshop direct aanpassen
4. De succesvolle aanpak voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolle aanpak voor A/B-testen
A/B testen Pagina(groep) Verwachte
impact
Hoeveelheid
bezoekers
Moeilijkheid Prioriteit
Test A Winkelwagen 9 7 9 8,3
Test C Productdetailpagina’s 8 6 10 8,0
Test B Checkout stap 2 6 5 10 7,0
Test E Categoriepagina’s 7 8 2 5,7
Test D Homepage 4 5 6 5,0
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhalen
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
1
“6 fasen”
Fase 1: Stel een goede hypothese op
Fase 1: Stel een goede hypothese op
 Een account aanmaken is niet verplicht. Dit wordt niet gecommuniceerd in de winkelmand
 ‘Bestelling afronden’ klinkt erg definitief. In deze stap wordt de bestelling nog niet afgerond
Fase 1: Stel een goede hypothese op
Het veranderenvan
het obstakel dat uit je analyse
naar voren komt in
iets waarvan je verwacht dat
het obstakel zal wegnemen
verhoogt/ verlaagt de test KPI bij de doelgroep
Fase 1: Stel een goede hypothese op
Het veranderenvan
Buttontekst:
Bestelling afronden in
Buttontekst:
Verder met bestellen
verhoogt/ verlaagt
het conversiepercentage
bij desktop verkeer
Fase 1: Stel een goede hypothese op
Het veranderenvan Geen tekst in
Bestel snel: Een account
aanmaken is niet verplicht
verhoogt/ verlaagt
het conversiepercentage
bij desktop verkeer
Fase 1: Stel een goede hypothese op
Door de buttontekst te wijzigen naar “Verder met bestellen” én door
een tekst toe te voegen onder de button “Bestel snel: Een account
aanmaken is NIET verplicht”, rondt een hoger percentage van de
desktop bezoekers hun bestelling af.
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhalen
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
De succesvolle aanpak voor A/B-testen
1
2
Fase 2: Maak je testplan
Een testplan opzetten
1. VaststellenvandetestKPI’s
2. Eentestmethodekiezen
3. Testduurbepalen
Fase 2: Maak je testplan
Een testplan opzetten
1. VaststellenvandetestKPI’s
2. Eentestmethodekiezen
3. Testduurbepalen
Fase 2: Maak je testplan
Fase 2: Maak je testplan
TestaltijddeKPIdiedebedrijfsdoelenhetdichtstnadert
Voorwaarden
1. DeKPI moetmeetbaarzijn
2. Voldoendetraffic enconversies
3. Duurvanaankoopprocesaanzienlijkkorterdantestduur
Fase 2: Maak je testplan
Een testplan opzetten
1. VaststellenvandetestKPI’s
2. Eentestmethodekiezen
3. Testduurbepalen
Fase 3: Maak je testplanHoeveelwijzigingentegelijkertijd testen?
Fase 2: Maak je testplan
Kies er 2!
Korte testduur
HogeimpactConversie-effect
toewijzen
(aan specifiekeaanpasing)
“Meerdereelementen
tegelijk testen”
• “1 elementtegelijk testenover
meerdereA/B testen”
• “Multivariatetesten*”
“1 elementtegelijk testen”
*Alleenbij voldoende trafficen conversies
Fase 2: Maak je testplan
Kies er 2!
Korte testduur
Conversie-effect
toewijzen
(aan specifiekeaanpasing)
“1 elementtegelijk testen”
Hogeimpact
Fase 2: Maak je testplan
Fase 2: Maak je testplan
VS
ORIGINEEL A VARIANT B
 Korte testduur
 Conversie-effect toewijzen
Fase 2: Maak je testplan
Kies er 2!
Korte testduur
HogeimpactConversie-effect
toewijzen
(aan specifiekeaanpasing)
“Meerdereelementen
tegelijk testen”
Fase 2: Maak je testplan
VS
ORIGINEEL A VARIANT B
 Korte testduur
 Hoge impact
Fase 2: Maak je testplan
Kies er 2!
Korte testduur
HogeimpactConversie-effect
toewijzen
(aan specifiekeaanpasing)
• “1 elementtegelijk testenover
meerdereA/B testen”
• “Multivariatetesten*”
*Alleenbij voldoende trafficen conversies
Fase 2: Maak je testplan
VS
ORIGINEEL A VARIANT B
 Conversie-effect toewijzen
 Hoge impact
Test 1
VSTest 2
VSTest 3
Fase 2: Maak je testplan
VS
VS
VS
ORIGINEEL A
VARIANT B
VARIANT C
VARIANT D
 Conversie-effect toewijzen
 Hoge impact
Fase 2: Maak je testplan
Een testplan opzetten
1. VaststellenvandetestKPI’s
2. Eentestmethodekiezen
3. Testduurbepalen
Fase 2: Maak je testplan
?
?
?
Bron: vwo.com/ab-split-test-duration/
Fase 2: Maak je testplan
Periode: Afgelopen 30 dagen 277 pageviews per dag (totaal/30)
Fase 2: Maak je testplan
Periode: Afgelopen 30 dagen
Conversiepercentagewinkelmand pagina:
Aantal transacties / Aantal unieke paginaweergaven winkelmand
(***/8308)*100% =
**.**%
Fase 2: Maak je testplan
***
12
***
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhalen
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
De succesvolle aanpak voor A/B-testen
1
2
3
Fase 3: Testvarianten maken
VS
ORIGINEEL A VARIANT B
 Korte testduur
 Hoge impact
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhalen
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
De succesvolle aanpak voor A/B-testen
1
2
3
4
Fase 4: Zet je test live en monitor
WACHT! Test voordat je écht live gaat nog het volgende:
Fase 4: Zet je test live en monitor
Test of alle elementenop je testpagina correct functioneren
 Werken alle functionaliteitenop de testpagina nog?
 Zijn er geen elementenverschoven?
 Check verschillendebrowsers
 Check verschillendebrowserversies (Internet Explorer)
 Check de zoomfunctieper browser
 Check verschillenderesoluties
 Test op één device tegelijk, sluit andere devices uit.
 Sluit buitenlandsverkeer uit
 Sluit ander niet-relevantverkeer uit (per test afhankelijk)
Fase 4: Zet je test live en monitor
Koppelje testdataaan GoogleAnalytics
Fase 4: Zet je test live en monitor
Koppelje testdataaan GoogleAnalytics
Fase 4: Zet je test live en monitor
Monitoren
1. StatistiekeninA/Btestsoftware
2. StatistiekeninGoogleAnalytics
3. Verschillenhiertussen
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhalen
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
De succesvolle aanpak voor A/B-testen
1
2
3
4
5
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhalen
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
De succesvolle aanpak voor A/B-testen
1
2
3
4
5
VS
ORIGINEEL A VARIANT B
 Korte testduur
 Hoge impact
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
Bron: abtestguide.com/calc/
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
ORIGINEEL A
Fase 5: Analyseer je testresultaten
VARIANT B
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
Vergeet niet te segmenteren
Fase 5: Analyseer je testresultaten
Variant B
Origineel A
Fase 5: Analyseer je testresultaten
Bron: abtestguide.com/calc/
Fase 5: Analyseer je testresultaten
Segmentatie mogelijkheden voor Analyse
 Nieuwevsterugkerendebezoekers
 Landen
 Verkeersbronnen
 Prijs-ofproductcategorieën
 Leeftijdscategorieën
Fase 5: Analyseer je testresultaten
Let op!
 Segmentenmoetengrootgenoegzijnomvalideconclusiestetrekken,
anderseennieuwetestopzetten.
 Controleer dezesteekproefgrootte meteentestduurcalculator
 Controleer ofdeverbetering significantis
 Controleer ofdoorvoeren geennegatief effect heeft opandere segmenten
Fase 5: Analyseer je testresultaten
ORIGINEEL A
Fase 5: Analyseer je testresultaten
VARIANT B
Fase 5: Analyseer je testresultaten
Fase 5: Analyseer je testresultaten
+ 3%
X %
Fase 5: Analyseer je testresultaten
Fase 6: Voer je winnaar door of voer niet door
Winnaar!
Je hypothese is bevestigd!D e hypot hese isbevesti gdz
D e hypo
Geen winnaar!
Je hypothese is niet bevestigd
Verder analyseren (Learnings)
Winnaar doorvoeren
Verder analyseren (Learnings)
Learnings post-testen/
Volgende A/B test
4. De succesvolleaanpak voor A/B-testen
Bronnen voor
conversieverbeteringen
Inzichten
Prioriteren
Test backlog
Hoog
Laag
Hypothese opstellen
Testplan maken
Testvariantenmaken
A/B test live
Analyseren
Learnings delen
Test
herhale
n
Informeren
team
Rapportage
o # bezoekers en
conversie per variant
o Segment analyse
o Significantie niveau
o Impact op KPI
Verandering
doorvoeren?
Nee JaVerwerpenen
naar volgende test
Maakticket voor
Development
Hoog
LIVE
Change backlog
o Webanalytics data
o Interviewsmetklanten
o Sessie recordinganalyses
o Onsite klantfeedback
o Usabilityonderzoek
o Gedragsonderzoek
o Analyse klantenservice
vragen
o Etc.
4. De succesvolle aanpak voor A/B-testen
1
2
3
4
5
Bedankt voor je aandacht
ADVIES // PRESENTATIE // VRAGEN
Leverje VISITEKAARTJEin en
ontvang alseersteGRATISdepresentatieinje mailbox
OF LOOPLANGSDESTANDNR A27
Vragen?

More Related Content

What's hot

Cross Border e-Commerce voor mono-brand en multi-brand
Cross Border e-Commerce voor mono-brand en multi-brandCross Border e-Commerce voor mono-brand en multi-brand
Cross Border e-Commerce voor mono-brand en multi-brand
valantic NL
 
Verhoog je online omzet door een hogere conversie 201114
Verhoog je online omzet door een hogere conversie 201114Verhoog je online omzet door een hogere conversie 201114
Verhoog je online omzet door een hogere conversie 201114
valantic NL
 
[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen
[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen
[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen
valantic NL
 
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaarGoogle Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
valantic NL
 
Verdubbel uw webshop conversie in 4 stappen!
Verdubbel uw webshop conversie in 4 stappen!Verdubbel uw webshop conversie in 4 stappen!
Verdubbel uw webshop conversie in 4 stappen!
valantic NL
 
Conversie optimalisatie-dmf14
Conversie optimalisatie-dmf14Conversie optimalisatie-dmf14
Conversie optimalisatie-dmf14
valantic NL
 
Omnichannel business case voor de retail
Omnichannel business case voor de retailOmnichannel business case voor de retail
Omnichannel business case voor de retail
valantic NL
 
Hoeveel budget moet je in 2017 inzetten op offline media?
Hoeveel budget moet je in 2017 inzetten op offline media?Hoeveel budget moet je in 2017 inzetten op offline media?
Hoeveel budget moet je in 2017 inzetten op offline media?
valantic NL
 
2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...
2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...
2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...
valantic NL
 
Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?
valantic NL
 
Mini Workshop: Onmisbare Google Analytics analyses voor ieder CRO traject
Mini Workshop: Onmisbare Google Analytics analyses voor ieder CRO trajectMini Workshop: Onmisbare Google Analytics analyses voor ieder CRO traject
Mini Workshop: Onmisbare Google Analytics analyses voor ieder CRO traject
valantic NL
 
De aanpak voor succesvolle A/B-testen
De aanpak voor succesvolle A/B-testenDe aanpak voor succesvolle A/B-testen
De aanpak voor succesvolle A/B-testen
valantic NL
 
Webinar: het effect van Google AdWords op offline winkelbezoek
Webinar: het effect van Google AdWords op offline winkelbezoekWebinar: het effect van Google AdWords op offline winkelbezoek
Webinar: het effect van Google AdWords op offline winkelbezoek
valantic NL
 
De student van de toekomst maakt het verschil met conversie-optimalisatie!
De student van de toekomst maakt het verschil met conversie-optimalisatie!De student van de toekomst maakt het verschil met conversie-optimalisatie!
De student van de toekomst maakt het verschil met conversie-optimalisatie!
valantic NL
 
Do's en don'ts bij B2B
Do's en don'ts bij B2BDo's en don'ts bij B2B
Do's en don'ts bij B2B
valantic NL
 
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaarGoogle Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
valantic NL
 
Boost uw omzet door uw conversie structureel te verhogen!
Boost uw omzet door uw conversie structureel te verhogen!Boost uw omzet door uw conversie structureel te verhogen!
Boost uw omzet door uw conversie structureel te verhogen!
valantic NL
 
Hoger rendement met google ad words voor smit mode 201114
Hoger rendement met google ad words voor smit mode 201114Hoger rendement met google ad words voor smit mode 201114
Hoger rendement met google ad words voor smit mode 201114
valantic NL
 
Cross border e commerce software
Cross border e commerce softwareCross border e commerce software
Cross border e commerce softwarevalantic NL
 
De kracht van google op de winkelvloer
De kracht van google op de winkelvloerDe kracht van google op de winkelvloer
De kracht van google op de winkelvloer
valantic NL
 

What's hot (20)

Cross Border e-Commerce voor mono-brand en multi-brand
Cross Border e-Commerce voor mono-brand en multi-brandCross Border e-Commerce voor mono-brand en multi-brand
Cross Border e-Commerce voor mono-brand en multi-brand
 
Verhoog je online omzet door een hogere conversie 201114
Verhoog je online omzet door een hogere conversie 201114Verhoog je online omzet door een hogere conversie 201114
Verhoog je online omzet door een hogere conversie 201114
 
[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen
[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen
[Webinar] Onmisbare Google Analytics analyses om direct geld mee te verdienen
 
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaarGoogle Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
 
Verdubbel uw webshop conversie in 4 stappen!
Verdubbel uw webshop conversie in 4 stappen!Verdubbel uw webshop conversie in 4 stappen!
Verdubbel uw webshop conversie in 4 stappen!
 
Conversie optimalisatie-dmf14
Conversie optimalisatie-dmf14Conversie optimalisatie-dmf14
Conversie optimalisatie-dmf14
 
Omnichannel business case voor de retail
Omnichannel business case voor de retailOmnichannel business case voor de retail
Omnichannel business case voor de retail
 
Hoeveel budget moet je in 2017 inzetten op offline media?
Hoeveel budget moet je in 2017 inzetten op offline media?Hoeveel budget moet je in 2017 inzetten op offline media?
Hoeveel budget moet je in 2017 inzetten op offline media?
 
2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...
2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...
2015 04-22-onmisbare google analytics analyses om direct geld mee te verdiene...
 
Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?
 
Mini Workshop: Onmisbare Google Analytics analyses voor ieder CRO traject
Mini Workshop: Onmisbare Google Analytics analyses voor ieder CRO trajectMini Workshop: Onmisbare Google Analytics analyses voor ieder CRO traject
Mini Workshop: Onmisbare Google Analytics analyses voor ieder CRO traject
 
De aanpak voor succesvolle A/B-testen
De aanpak voor succesvolle A/B-testenDe aanpak voor succesvolle A/B-testen
De aanpak voor succesvolle A/B-testen
 
Webinar: het effect van Google AdWords op offline winkelbezoek
Webinar: het effect van Google AdWords op offline winkelbezoekWebinar: het effect van Google AdWords op offline winkelbezoek
Webinar: het effect van Google AdWords op offline winkelbezoek
 
De student van de toekomst maakt het verschil met conversie-optimalisatie!
De student van de toekomst maakt het verschil met conversie-optimalisatie!De student van de toekomst maakt het verschil met conversie-optimalisatie!
De student van de toekomst maakt het verschil met conversie-optimalisatie!
 
Do's en don'ts bij B2B
Do's en don'ts bij B2BDo's en don'ts bij B2B
Do's en don'ts bij B2B
 
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaarGoogle Analytics voor webshops met meer omzet dan 1 miljoen per jaar
Google Analytics voor webshops met meer omzet dan 1 miljoen per jaar
 
Boost uw omzet door uw conversie structureel te verhogen!
Boost uw omzet door uw conversie structureel te verhogen!Boost uw omzet door uw conversie structureel te verhogen!
Boost uw omzet door uw conversie structureel te verhogen!
 
Hoger rendement met google ad words voor smit mode 201114
Hoger rendement met google ad words voor smit mode 201114Hoger rendement met google ad words voor smit mode 201114
Hoger rendement met google ad words voor smit mode 201114
 
Cross border e commerce software
Cross border e commerce softwareCross border e commerce software
Cross border e commerce software
 
De kracht van google op de winkelvloer
De kracht van google op de winkelvloerDe kracht van google op de winkelvloer
De kracht van google op de winkelvloer
 

Viewers also liked

google analytics voor webshops met meer omzet dan 1 miljoen per jaar
google analytics voor webshops met meer omzet dan 1 miljoen per jaargoogle analytics voor webshops met meer omzet dan 1 miljoen per jaar
google analytics voor webshops met meer omzet dan 1 miljoen per jaar
valantic NL
 
Load En Stress Testers Te Slim Af Final
Load En Stress Testers Te Slim Af FinalLoad En Stress Testers Te Slim Af Final
Load En Stress Testers Te Slim Af Final
PlutonIT
 
Blog ab testing a6
Blog ab testing a6Blog ab testing a6
Blog ab testing a6
Neil Kirby
 
AB testen in de praktijk
AB testen in de praktijkAB testen in de praktijk
AB testen in de praktijkGerron Mulder
 
WWV 2017: omnichannel infrastructuur
WWV 2017: omnichannel infrastructuurWWV 2017: omnichannel infrastructuur
WWV 2017: omnichannel infrastructuur
valantic NL
 
WWV 2017: maximaal rendement uit marketing automation
WWV 2017: maximaal rendement uit marketing automationWWV 2017: maximaal rendement uit marketing automation
WWV 2017: maximaal rendement uit marketing automation
valantic NL
 

Viewers also liked (9)

google analytics voor webshops met meer omzet dan 1 miljoen per jaar
google analytics voor webshops met meer omzet dan 1 miljoen per jaargoogle analytics voor webshops met meer omzet dan 1 miljoen per jaar
google analytics voor webshops met meer omzet dan 1 miljoen per jaar
 
Kehoach1
Kehoach1Kehoach1
Kehoach1
 
Load En Stress Testers Te Slim Af Final
Load En Stress Testers Te Slim Af FinalLoad En Stress Testers Te Slim Af Final
Load En Stress Testers Te Slim Af Final
 
Blog ab testing a6
Blog ab testing a6Blog ab testing a6
Blog ab testing a6
 
AB testen in de praktijk
AB testen in de praktijkAB testen in de praktijk
AB testen in de praktijk
 
Team presentation 89/100
Team presentation 89/100Team presentation 89/100
Team presentation 89/100
 
Lucardi
LucardiLucardi
Lucardi
 
WWV 2017: omnichannel infrastructuur
WWV 2017: omnichannel infrastructuurWWV 2017: omnichannel infrastructuur
WWV 2017: omnichannel infrastructuur
 
WWV 2017: maximaal rendement uit marketing automation
WWV 2017: maximaal rendement uit marketing automationWWV 2017: maximaal rendement uit marketing automation
WWV 2017: maximaal rendement uit marketing automation
 

Similar to De aanpak voor succesvolle A/B-testen

Cases van conversie-optimalisatie op de smartphone - ShoppingTomorrow
Cases van conversie-optimalisatie op de smartphone - ShoppingTomorrowCases van conversie-optimalisatie op de smartphone - ShoppingTomorrow
Cases van conversie-optimalisatie op de smartphone - ShoppingTomorrow
valantic NL
 
De aanpak voor succesvo A/B-testen
De aanpak voor succesvo A/B-testenDe aanpak voor succesvo A/B-testen
De aanpak voor succesvo A/B-testen
valantic NL
 
Tribal mini PMU kennisevent mobile presentatie Wil Salden
Tribal mini PMU kennisevent mobile presentatie Wil SaldenTribal mini PMU kennisevent mobile presentatie Wil Salden
Tribal mini PMU kennisevent mobile presentatie Wil Salden
Tribal Internet Marketing
 
ShoppingTomorrow: datagedreven conversie-optimalisatiecases
ShoppingTomorrow: datagedreven conversie-optimalisatiecasesShoppingTomorrow: datagedreven conversie-optimalisatiecases
ShoppingTomorrow: datagedreven conversie-optimalisatiecases
valantic NL
 
Conversie verhogen zonder A/B-testen: de top 5 methoden
Conversie verhogen zonder A/B-testen: de top 5 methodenConversie verhogen zonder A/B-testen: de top 5 methoden
Conversie verhogen zonder A/B-testen: de top 5 methoden
valantic NL
 
Conversie verhogen zonder A/B-testen? De top 5 beste methoden!
Conversie verhogen zonder A/B-testen? De top 5 beste methoden!Conversie verhogen zonder A/B-testen? De top 5 beste methoden!
Conversie verhogen zonder A/B-testen? De top 5 beste methoden!
valantic NL
 
Orange Valley - 7 effectieve handvatten voor een effectief cxo proces
Orange Valley - 7 effectieve handvatten voor een effectief cxo procesOrange Valley - 7 effectieve handvatten voor een effectief cxo proces
Orange Valley - 7 effectieve handvatten voor een effectief cxo proces
BBP
 
Verdubbel je rendement door data-driven conversie-optimalisatie!
Verdubbel je rendement door data-driven conversie-optimalisatie!Verdubbel je rendement door data-driven conversie-optimalisatie!
Verdubbel je rendement door data-driven conversie-optimalisatie!
valantic NL
 
Lucardi ISM Webwinkel Vakdagen
Lucardi ISM Webwinkel VakdagenLucardi ISM Webwinkel Vakdagen
Lucardi ISM Webwinkel Vakdagen
webwinkelvakdag
 
Datagedreven conversieoptimalisatie bij Lucardi
Datagedreven conversieoptimalisatie bij LucardiDatagedreven conversieoptimalisatie bij Lucardi
Datagedreven conversieoptimalisatie bij Lucardi
valantic NL
 
Haal meer rendement uit uw conversie-optimalisatieprogramma
Haal meer rendement uit uw conversie-optimalisatieprogrammaHaal meer rendement uit uw conversie-optimalisatieprogramma
Haal meer rendement uit uw conversie-optimalisatieprogramma
valantic NL
 
WWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatie
WWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatieWWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatie
WWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatie
valantic NL
 
Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?
valantic NL
 
Conversie optimalisatie in de praktijk
Conversie optimalisatie in de praktijkConversie optimalisatie in de praktijk
Conversie optimalisatie in de praktijk
Netprofiler
 
Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop pro...
Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop   pro...Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop   pro...
Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop pro...
valantic NL
 
Conversie-optimalisatie voor e-commerce op mobiel
Conversie-optimalisatie voor e-commerce op mobiel Conversie-optimalisatie voor e-commerce op mobiel
Conversie-optimalisatie voor e-commerce op mobiel
valantic NL
 
Converion rate optimization (GAUC / Traffic4U)
Converion rate optimization (GAUC / Traffic4U)Converion rate optimization (GAUC / Traffic4U)
Converion rate optimization (GAUC / Traffic4U)Webanalisten .nl
 
Web analytics en conversie optimalisatie_TCD 2010
Web analytics en conversie optimalisatie_TCD 2010Web analytics en conversie optimalisatie_TCD 2010
Web analytics en conversie optimalisatie_TCD 2010
Netprofiler
 
Online versnellen door digitale transformatie bij NS international
Online versnellen door digitale transformatie bij NS internationalOnline versnellen door digitale transformatie bij NS international
Online versnellen door digitale transformatie bij NS international
webwinkelvakdag
 
Oogst - GAUC 2016
Oogst - GAUC 2016Oogst - GAUC 2016
Oogst - GAUC 2016
Oogst
 

Similar to De aanpak voor succesvolle A/B-testen (20)

Cases van conversie-optimalisatie op de smartphone - ShoppingTomorrow
Cases van conversie-optimalisatie op de smartphone - ShoppingTomorrowCases van conversie-optimalisatie op de smartphone - ShoppingTomorrow
Cases van conversie-optimalisatie op de smartphone - ShoppingTomorrow
 
De aanpak voor succesvo A/B-testen
De aanpak voor succesvo A/B-testenDe aanpak voor succesvo A/B-testen
De aanpak voor succesvo A/B-testen
 
Tribal mini PMU kennisevent mobile presentatie Wil Salden
Tribal mini PMU kennisevent mobile presentatie Wil SaldenTribal mini PMU kennisevent mobile presentatie Wil Salden
Tribal mini PMU kennisevent mobile presentatie Wil Salden
 
ShoppingTomorrow: datagedreven conversie-optimalisatiecases
ShoppingTomorrow: datagedreven conversie-optimalisatiecasesShoppingTomorrow: datagedreven conversie-optimalisatiecases
ShoppingTomorrow: datagedreven conversie-optimalisatiecases
 
Conversie verhogen zonder A/B-testen: de top 5 methoden
Conversie verhogen zonder A/B-testen: de top 5 methodenConversie verhogen zonder A/B-testen: de top 5 methoden
Conversie verhogen zonder A/B-testen: de top 5 methoden
 
Conversie verhogen zonder A/B-testen? De top 5 beste methoden!
Conversie verhogen zonder A/B-testen? De top 5 beste methoden!Conversie verhogen zonder A/B-testen? De top 5 beste methoden!
Conversie verhogen zonder A/B-testen? De top 5 beste methoden!
 
Orange Valley - 7 effectieve handvatten voor een effectief cxo proces
Orange Valley - 7 effectieve handvatten voor een effectief cxo procesOrange Valley - 7 effectieve handvatten voor een effectief cxo proces
Orange Valley - 7 effectieve handvatten voor een effectief cxo proces
 
Verdubbel je rendement door data-driven conversie-optimalisatie!
Verdubbel je rendement door data-driven conversie-optimalisatie!Verdubbel je rendement door data-driven conversie-optimalisatie!
Verdubbel je rendement door data-driven conversie-optimalisatie!
 
Lucardi ISM Webwinkel Vakdagen
Lucardi ISM Webwinkel VakdagenLucardi ISM Webwinkel Vakdagen
Lucardi ISM Webwinkel Vakdagen
 
Datagedreven conversieoptimalisatie bij Lucardi
Datagedreven conversieoptimalisatie bij LucardiDatagedreven conversieoptimalisatie bij Lucardi
Datagedreven conversieoptimalisatie bij Lucardi
 
Haal meer rendement uit uw conversie-optimalisatieprogramma
Haal meer rendement uit uw conversie-optimalisatieprogrammaHaal meer rendement uit uw conversie-optimalisatieprogramma
Haal meer rendement uit uw conversie-optimalisatieprogramma
 
WWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatie
WWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatieWWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatie
WWV 2017: verdubbel uw rendement door datagedreven conversie-optimalisatie
 
Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?Conversie-optimalisatie: hoe pakt u dat aan?
Conversie-optimalisatie: hoe pakt u dat aan?
 
Conversie optimalisatie in de praktijk
Conversie optimalisatie in de praktijkConversie optimalisatie in de praktijk
Conversie optimalisatie in de praktijk
 
Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop pro...
Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop   pro...Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop   pro...
Hoe realiseert u een hoger conversiepercentage op mobiel dan op desktop pro...
 
Conversie-optimalisatie voor e-commerce op mobiel
Conversie-optimalisatie voor e-commerce op mobiel Conversie-optimalisatie voor e-commerce op mobiel
Conversie-optimalisatie voor e-commerce op mobiel
 
Converion rate optimization (GAUC / Traffic4U)
Converion rate optimization (GAUC / Traffic4U)Converion rate optimization (GAUC / Traffic4U)
Converion rate optimization (GAUC / Traffic4U)
 
Web analytics en conversie optimalisatie_TCD 2010
Web analytics en conversie optimalisatie_TCD 2010Web analytics en conversie optimalisatie_TCD 2010
Web analytics en conversie optimalisatie_TCD 2010
 
Online versnellen door digitale transformatie bij NS international
Online versnellen door digitale transformatie bij NS internationalOnline versnellen door digitale transformatie bij NS international
Online versnellen door digitale transformatie bij NS international
 
Oogst - GAUC 2016
Oogst - GAUC 2016Oogst - GAUC 2016
Oogst - GAUC 2016
 

More from valantic NL

B2B verhoog conversie loyaliteit met hyperpersonalisatie
B2B verhoog conversie loyaliteit met hyperpersonalisatieB2B verhoog conversie loyaliteit met hyperpersonalisatie
B2B verhoog conversie loyaliteit met hyperpersonalisatie
valantic NL
 
WWV - Presentatie Sander B Hyperpersonalisatie
WWV - Presentatie Sander B HyperpersonalisatieWWV - Presentatie Sander B Hyperpersonalisatie
WWV - Presentatie Sander B Hyperpersonalisatie
valantic NL
 
Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans?
Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans? Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans?
Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans?
valantic NL
 
Webwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomst
Webwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomstWebwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomst
Webwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomst
valantic NL
 
Duurzaamheid-WWVD
Duurzaamheid-WWVDDuurzaamheid-WWVD
Duurzaamheid-WWVD
valantic NL
 
WWV - Presentatie Sander B - Futureproof Technologies
WWV - Presentatie Sander B - Futureproof TechnologiesWWV - Presentatie Sander B - Futureproof Technologies
WWV - Presentatie Sander B - Futureproof Technologies
valantic NL
 
Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0
Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0
Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0
valantic NL
 
Sessie Feiko Bierman - Data-gedreven werken binnen e-commerce
Sessie Feiko Bierman - Data-gedreven werken binnen e-commerceSessie Feiko Bierman - Data-gedreven werken binnen e-commerce
Sessie Feiko Bierman - Data-gedreven werken binnen e-commerce
valantic NL
 
Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...
Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...
Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...
valantic NL
 
Sessie Leila Govers - Duurzaamheid en e-commerce
Sessie Leila Govers - Duurzaamheid en e-commerceSessie Leila Govers - Duurzaamheid en e-commerce
Sessie Leila Govers - Duurzaamheid en e-commerce
valantic NL
 
Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...
Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...
Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...
valantic NL
 
Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...
Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...
Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...
valantic NL
 
Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...
Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...
Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...
valantic NL
 
Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...
Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...
Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...
valantic NL
 
Sessie Sander Lems - Datagedreven assortiments-optimalisatie
Sessie Sander Lems - Datagedreven assortiments-optimalisatieSessie Sander Lems - Datagedreven assortiments-optimalisatie
Sessie Sander Lems - Datagedreven assortiments-optimalisatie
valantic NL
 
Sessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte fouten
Sessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte foutenSessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte fouten
Sessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte fouten
valantic NL
 
Sessie Lara Pap - Vermarktplaatsing van het e-commercelandschap
Sessie Lara Pap - Vermarktplaatsing van het e-commercelandschapSessie Lara Pap - Vermarktplaatsing van het e-commercelandschap
Sessie Lara Pap - Vermarktplaatsing van het e-commercelandschap
valantic NL
 
Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken.
Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken. Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken.
Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken.
valantic NL
 
Webinar Marketplaces
Webinar MarketplacesWebinar Marketplaces
Webinar Marketplaces
valantic NL
 
Webinar: Data Science
Webinar: Data ScienceWebinar: Data Science
Webinar: Data Science
valantic NL
 

More from valantic NL (20)

B2B verhoog conversie loyaliteit met hyperpersonalisatie
B2B verhoog conversie loyaliteit met hyperpersonalisatieB2B verhoog conversie loyaliteit met hyperpersonalisatie
B2B verhoog conversie loyaliteit met hyperpersonalisatie
 
WWV - Presentatie Sander B Hyperpersonalisatie
WWV - Presentatie Sander B HyperpersonalisatieWWV - Presentatie Sander B Hyperpersonalisatie
WWV - Presentatie Sander B Hyperpersonalisatie
 
Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans?
Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans? Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans?
Webwinkel Vakdagen: TikTok, alleen maar gekke dansjes of een enorme kans?
 
Webwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomst
Webwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomstWebwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomst
Webwinkel Vakdagen: Grootste ecommerce innovaties van nu en in de toekomst
 
Duurzaamheid-WWVD
Duurzaamheid-WWVDDuurzaamheid-WWVD
Duurzaamheid-WWVD
 
WWV - Presentatie Sander B - Futureproof Technologies
WWV - Presentatie Sander B - Futureproof TechnologiesWWV - Presentatie Sander B - Futureproof Technologies
WWV - Presentatie Sander B - Futureproof Technologies
 
Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0
Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0
Masterclass Hyperpersonalisatie - Van Strategie tot Executie 1.0
 
Sessie Feiko Bierman - Data-gedreven werken binnen e-commerce
Sessie Feiko Bierman - Data-gedreven werken binnen e-commerceSessie Feiko Bierman - Data-gedreven werken binnen e-commerce
Sessie Feiko Bierman - Data-gedreven werken binnen e-commerce
 
Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...
Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...
Sessie Feiko Bierman - Zo personaliseer je je klantreis voor iedere individue...
 
Sessie Leila Govers - Duurzaamheid en e-commerce
Sessie Leila Govers - Duurzaamheid en e-commerceSessie Leila Govers - Duurzaamheid en e-commerce
Sessie Leila Govers - Duurzaamheid en e-commerce
 
Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...
Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...
Sessie Jack Solcer & Raoul van Tol - 50% meer abonnementen door conversie opt...
 
Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...
Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...
Sessie Gayan Teubel & Sally Bakker - JBL van lokale datagedreven inzichten na...
 
Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...
Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...
Sessie Jurjen Jongejan - Dé succesfactoren voor conversie-optimalisatie in de...
 
Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...
Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...
Sessie Jurjen Jongejan - In 4 stappen naar een hogere conversie met je produc...
 
Sessie Sander Lems - Datagedreven assortiments-optimalisatie
Sessie Sander Lems - Datagedreven assortiments-optimalisatieSessie Sander Lems - Datagedreven assortiments-optimalisatie
Sessie Sander Lems - Datagedreven assortiments-optimalisatie
 
Sessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte fouten
Sessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte foutenSessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte fouten
Sessie Elske Hesen - Webshop redesign, voorkom de meest gemaakte fouten
 
Sessie Lara Pap - Vermarktplaatsing van het e-commercelandschap
Sessie Lara Pap - Vermarktplaatsing van het e-commercelandschapSessie Lara Pap - Vermarktplaatsing van het e-commercelandschap
Sessie Lara Pap - Vermarktplaatsing van het e-commercelandschap
 
Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken.
Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken. Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken.
Duurzaamheid en e-commerce: inspirerende voorbeelden om zelf impact te maken.
 
Webinar Marketplaces
Webinar MarketplacesWebinar Marketplaces
Webinar Marketplaces
 
Webinar: Data Science
Webinar: Data ScienceWebinar: Data Science
Webinar: Data Science
 

De aanpak voor succesvolle A/B-testen

  • 1. Dé aanpakvoorsuccesvolle A/B-testen! Bezoek onze stand: A27 Wouter Wensing Teamlead Conversion & Webanalytics Webwinkel Vakdagen 2016| Jaarbeurs Utrecht| 20 januari 2016
  • 2. Wouter Wensing Teamlead Conversion&Webanalytics| ISM eCompany w.wensing@ism.nl linkedin.com/in/wouterwensing ISM eCompany 2015 Teamlead Conversion& Webanalytics 2014 Webanalytics& conversie-optimalisatieconsultant 2012 Online marketingconsultant Erasmus Universiteit Rotterdam Arbeids-& OrganisatiePsychologie
  • 3. jaar e-Commerce experience 20+ 100+ e-Marketing klantenSana & Magento Shops 500+ Design klanten 100+ Netherlands | USA | Indonesia| UK | Belgium | Australia | Ukraine | Sri Lanka | Austria 10offices e-Commerce specialisten 350+
  • 4.
  • 5. Wij zijn trots om te werken voor AGENDAAGENDA
  • 6. Agenda 1. Wat is A/B-testen? 2. Waarom ga je A/B-testen? 3. Wanneer ga je A/B-testen? 4. De succesvolle aanpak voor A/B-testen
  • 7. 1. Wat is A/B-testen?
  • 9. 1. Opzet A/B test ORIGINEEL A
  • 10. 1. Opzet A/B test VARIANT B
  • 11. 1. Opzet A/B test
  • 12. 2. Waarom ga je A/B-testen?
  • 13. 2. Waarom ga je A/B-testen? Periode Conversiepercentage Verbetering april 1% mei ?
  • 14. 2. Waarom ga je A/B-testen?
  • 15. 2. Waarom ga je A/B-testen?
  • 16. 2. Waarom ga je A/B-testen?
  • 17. 2. Waarom ga je A/B-testen?
  • 18. Periode Conversiepercentage Verbetering april 1% mei 1.5% +50% 2. Waarom ga je A/B-testen?
  • 19. 2. Waarom ga je A/B-testen? Non-sale periode
  • 20. 2. Waarom ga je A/B-testen? Sale periode
  • 21. 2. Waarom ga je A/B-testen? Uitsluiten  Sale  Wijzigingeninonline/offlinecampagnes  Wijzigingeninassortiment  Overigewijzigingenaandewebshop  Seizoensinvloeden  Feestdagen
  • 22. 2. Waarom ga je A/B-testen? ORIGINEEL A VARIANT B
  • 23. 2. Waarom ga je A/B-testen?
  • 24. 2. Waarom ga je A/B-testen? Learnings
  • 25. 2. Waarom ga je A/B-testen?
  • 26. 2. Waarom ga je A/B-testen? ORIGINEEL A VARIANT B
  • 27. 2. Waarom ga je A/B-testen? Learningstoepassenbij  GoogleAdwordsadvertenties  Facebookadvertenties  E-mailmarketingcampagnes  USP’s vandewebshop  Anderepaginatemplatesbinnendewebshop  VolgendeA/Btests
  • 28. 3. Wanneer ga je A/B-testen?
  • 29. Technologie Functionaliteit Usability Intuïtie Emotie Obstakels wegnemen Hypotheses altijd A/B testen Obstakels wegnemen Hypotheses altijd A/B testenUnieke waarde propositie Obstakels wegnemen Hypotheses A/B testenof webshop direct aanpassen Obstakels wegnemen Webshop direct aanpassen 4. De succesvolle aanpak voor A/B-testen
  • 30. 4. De succesvolle aanpak voor A/B-testen
  • 31. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 32. 4. De succesvolle aanpak voor A/B-testen
  • 33. 4. De succesvolle aanpak voor A/B-testen
  • 34. 4. De succesvolle aanpak voor A/B-testen  63% van de bezoekers die de winkelmand bereiken, verlaat deze zonder verder te gaan met bestellen
  • 35. 4. De succesvolle aanpak voor A/B-testen
  • 36. 4. De succesvolle aanpak voor A/B-testen  Voor diverse bezoekers bleek het niet duidelijk te zijn dat een account aanmaken niet verplicht is
  • 37. 4. De succesvolle aanpak voor A/B-testen
  • 38. 4. De succesvolle aanpak voor A/B-testen  Diverse bezoekers lijken te twijfelen om door te gaan naar de checkout en verlaten de webshop
  • 39. 4. De succesvolle aanpak voor A/B-testen
  • 40. 4. De succesvolle aanpak voor A/B-testen  Conversie expert reviewop basis van eigen expertise, gebruikersonderzoeken, best practices en...
  • 41. 4. De succesvolle aanpak voor A/B-testen  ...Eerder uitgevoerde A/B tests
  • 42. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 43. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 44. 4. De succesvolle aanpak voor A/B-testen
  • 45. Verbeterpunten Pagina Device Analyse Vermijd het gebruik van scrollbars bij filters Dit is niet gebruiksvriendelijk, zeker niet bij tablets.Toon liever de belangrijkste merken (minimaal 6, maximaal 10) en een ‘Toon meer’ button/tekstlink. Categoriepagina alle devices Expert review okt-15 Doorvoeren loyalty e-mail campagnes campagne alle devices Data Analyse Vermeld prominent verzendkosten, levertijden en overige voorwaarden voor bestellen vanuit België en Duitsland Plaats een duidelijke link of button naar een pagina met verzendkosten, levertijden, etc. voor in ieder geval België en Duitsland. Deze landen zijn verantwoordelijk voor zo’n 5% van de omzet en voor deze bezoekers moet direct duidelijk zijn wat voor hen de voorwaarden zijn. Alle pagina's alle devices Expert review okt-15 AB test: Buttontekst aanpassen ‘Verder naar bestellen’ Wat met ‘Naar uw gegevens’ wordt bedoeld is mogelijk niet voor iedere bezoeker duidelijk. Een AB test kan uitwijzen of een buttontekst zoals ‘Verder/Doorgaan met bestellen’ tot een hoger doorklikratio leidt. Winkelmand alle devices Expert review okt-15 Toon een shop reviews widget, incl. klantcijfer en aantal beoordelingen Toon een shop reviews widget waarbij minimaal één klantreview zichtbaar is. Winkelmand alle devices Expert review okt-15 Toon duidelijk een telefoonnummer van de klantenservice De klantenservice verhoogt het conversiepercentage.Zorg dat het telefoonnummer en e-mailadres van de klantenservice prominenter in beeld is, tezamen met de tijden waarop deze bereikbaar is. Winkelmand alle devices Expert review okt-15 Toon levertijd in de winkelmand Geef de levertijd weer van de producten in de winkelmand Winkelmand alle devices Expert review okt-15 Klantbeoordelingen prominenter tonen, inclusief cijfer, boven de vouw (lieft in de header) Alle pagina's alle devices Heatmap analyse Weergeven van Thuiswinkel Waarvorg logo boven de vouw (heaer) Een bekend keurmerk versterkt het vertrouwen in de webshop, met name bij nieuwe bezoekers. Toon dit keurmerk daarom prominent op iedere pagina. Alle pagina's alle devices Expert review okt-15 Klantreviews (reviews over de shop zelf) + klantcijfer tonen Toon deze prominent en dynamisch op de detailpagina. Productpagina alle devices Expert review okt-15 Micro-copywriting* onder bestelbutton Een vlot bestelproces is altijd prettig voor bezoekers . Geef daarom onder de button middels micro-copywriting aan dat bij Jeroen Beekman snel besteld kan worden zonder een account aan te maken. Tip: Een A/B test kan uitwijzen of deze tekst de CTR doet verhogen. Winkelmand alle devices Expert review okt-15 Toon tijdens het bestelproces altijd het betreffende besteloverzicht. Zorg dat de artikelen die de bezoeker wil bestellen in een kort overzicht, tijdens het bestelproces altijd in beeld zijn. Zo weet de bezoeker ten aller tijde wat hij straks gaat bestellen. Door dit overzicht sticky te maken, blijft deze altijd zichtbaar wanneer naar beneden gescrold wordt. Checkout alle devices Expert review okt-15 Klantreviews (reviews over de shop zelf) + klantcijfer tonen Toon deze prominent en dynamisch op de overzichtpagina, liefst met minimaal één klantreview. Categoriepagina alle devices Expert review okt-15 Toon productreviews (sterren) Versterk hiermee de sociale bevestiging bij bezoekers en help ze hun keuze te vereenvoudigen. Categoriepagina alle devices Expert review okt-15 Prominent tonen shopreviews + cijfer. Jeroen Beekman maakt gebruik van shopreviews, echter wordt dit niet duidelijk boven de vouw gecommuniceerd. Toon de gemiddelde klantbeoordeling promintent (in de header) inclusief cijfer en aantal beoordelingen. Homepage alle devices Expert review okt-15 Toon voorraadstatus in de winkelmand Geef de voorraadstatus weer van de producten in de winkelmand en speel in op schaarste: “Nog 1 op voorraad!” Winkelmand alle devices Expert review okt-15 “Kassakoopjes” eenvoudig toevoegen aan winkelmand Geef de mogelijkheid om “Kassakoopjes” (zoals waterdicht spray) direct toe te voegen aan de winkelmand voor eenvoudige up-sell. Winkelmand alle devices Expert review okt-15 Toon de totale korting (indien aanwezig) En geef aan dat deze al verrekend is. Geef bezoekers een ‘feel good’ gevoel door te laten zien wat zij besparen op hun bestelling Winkelmand alle devices Expert review okt-15 Vandaag besteld, actuele datum+tijdstip in huis. Geef dynamisch aan wanneer de bezoeker zijn bestelling in huis heeft wanneer hij nu besteld om het gevoel van mentaal bezit nemen te versterken. Productpagina alle devices Expert review okt-15 Toon de best verkochte merken als eerst in het filter Zodra de bezoeker kiest voor ‘Toon meer’, toon dan de producten op alfabetische volgorde. Zelfde geldt voor categorieën. Categoriepagina alle devices Expert review okt-15 4. De succesvolle aanpak voor A/B-testen
  • 46. 4. De succesvolle aanpak voor A/B-testen Hoeveelheid bezoekers Impact op conversie Moelijkheid 1 = heel weinig bezoekers 10 = heel veel bezoekers 1 = zeer lage impact 10 = zeer hoge impact 1 = zeer complex 10 = zeer eenvoudig Prioriteit Het gemiddelde van bovenstaande3 bepaalt de prioriteit én de A/B-test waar je als eerste mee begint! ++
  • 47. 4. De succesvolle aanpak voor A/B-testen Inzichten Pagina(groep) Verwachte impact Hoeveelheid bezoekers Moeilijkheid Prioriteit Verbeterpunt A Winkelwagen 9 7 9 8,3 Verbeterpunt B Checkout stap 2 6 5 10 7,0 Verbeterpunt C Productdetailpagina’s 8 6 10 8,0 Verbeterpunt D Homepage 4 5 6 5,0 Verbeterpunt E Categoriepagina’s 7 8 2 5,7
  • 48. 4. De succesvolle aanpak voor A/B-testen Inzichten Pagina(groep) Verwachte impact Hoeveelheid bezoekers Moeilijkheid Prioriteit Verbeterpunt A Winkelwagen 9 7 9 8,3 Verbeterpunt C Productdetailpagina’s 8 6 10 8,0 Verbeterpunt B Checkout stap 2 6 5 10 7,0 Verbeterpunt E Categoriepagina’s 7 8 2 5,7 Verbeterpunt D Homepage 4 5 6 5,0
  • 49. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 50. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 51. Technologie Functionaliteit Usability Intuïtie Emotie Obstakels wegnemen Hypotheses altijd A/B testen Obstakels wegnemen Hypotheses altijd A/B testenUnieke waarde propositie Obstakels wegnemen Hypotheses A/B testenof webshop direct aanpassen Obstakels wegnemen Webshop direct aanpassen 4. De succesvolle aanpak voor A/B-testen
  • 52. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 53. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 54. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 55. 4. De succesvolle aanpak voor A/B-testen A/B testen Pagina(groep) Verwachte impact Hoeveelheid bezoekers Moeilijkheid Prioriteit Test A Winkelwagen 9 7 9 8,3 Test C Productdetailpagina’s 8 6 10 8,0 Test B Checkout stap 2 6 5 10 7,0 Test E Categoriepagina’s 7 8 2 5,7 Test D Homepage 4 5 6 5,0
  • 56. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen
  • 57. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhalen Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen 1 “6 fasen”
  • 58. Fase 1: Stel een goede hypothese op
  • 59. Fase 1: Stel een goede hypothese op  Een account aanmaken is niet verplicht. Dit wordt niet gecommuniceerd in de winkelmand  ‘Bestelling afronden’ klinkt erg definitief. In deze stap wordt de bestelling nog niet afgerond
  • 60. Fase 1: Stel een goede hypothese op Het veranderenvan het obstakel dat uit je analyse naar voren komt in iets waarvan je verwacht dat het obstakel zal wegnemen verhoogt/ verlaagt de test KPI bij de doelgroep
  • 61. Fase 1: Stel een goede hypothese op Het veranderenvan Buttontekst: Bestelling afronden in Buttontekst: Verder met bestellen verhoogt/ verlaagt het conversiepercentage bij desktop verkeer
  • 62. Fase 1: Stel een goede hypothese op Het veranderenvan Geen tekst in Bestel snel: Een account aanmaken is niet verplicht verhoogt/ verlaagt het conversiepercentage bij desktop verkeer
  • 63. Fase 1: Stel een goede hypothese op Door de buttontekst te wijzigen naar “Verder met bestellen” én door een tekst toe te voegen onder de button “Bestel snel: Een account aanmaken is NIET verplicht”, rondt een hoger percentage van de desktop bezoekers hun bestelling af.
  • 64. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhalen Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. De succesvolle aanpak voor A/B-testen 1 2
  • 65. Fase 2: Maak je testplan Een testplan opzetten 1. VaststellenvandetestKPI’s 2. Eentestmethodekiezen 3. Testduurbepalen
  • 66. Fase 2: Maak je testplan Een testplan opzetten 1. VaststellenvandetestKPI’s 2. Eentestmethodekiezen 3. Testduurbepalen
  • 67. Fase 2: Maak je testplan
  • 68. Fase 2: Maak je testplan TestaltijddeKPIdiedebedrijfsdoelenhetdichtstnadert Voorwaarden 1. DeKPI moetmeetbaarzijn 2. Voldoendetraffic enconversies 3. Duurvanaankoopprocesaanzienlijkkorterdantestduur
  • 69. Fase 2: Maak je testplan Een testplan opzetten 1. VaststellenvandetestKPI’s 2. Eentestmethodekiezen 3. Testduurbepalen
  • 70. Fase 3: Maak je testplanHoeveelwijzigingentegelijkertijd testen?
  • 71. Fase 2: Maak je testplan Kies er 2! Korte testduur HogeimpactConversie-effect toewijzen (aan specifiekeaanpasing) “Meerdereelementen tegelijk testen” • “1 elementtegelijk testenover meerdereA/B testen” • “Multivariatetesten*” “1 elementtegelijk testen” *Alleenbij voldoende trafficen conversies
  • 72. Fase 2: Maak je testplan Kies er 2! Korte testduur Conversie-effect toewijzen (aan specifiekeaanpasing) “1 elementtegelijk testen” Hogeimpact
  • 73. Fase 2: Maak je testplan
  • 74. Fase 2: Maak je testplan VS ORIGINEEL A VARIANT B  Korte testduur  Conversie-effect toewijzen
  • 75. Fase 2: Maak je testplan Kies er 2! Korte testduur HogeimpactConversie-effect toewijzen (aan specifiekeaanpasing) “Meerdereelementen tegelijk testen”
  • 76. Fase 2: Maak je testplan VS ORIGINEEL A VARIANT B  Korte testduur  Hoge impact
  • 77. Fase 2: Maak je testplan Kies er 2! Korte testduur HogeimpactConversie-effect toewijzen (aan specifiekeaanpasing) • “1 elementtegelijk testenover meerdereA/B testen” • “Multivariatetesten*” *Alleenbij voldoende trafficen conversies
  • 78. Fase 2: Maak je testplan VS ORIGINEEL A VARIANT B  Conversie-effect toewijzen  Hoge impact Test 1 VSTest 2 VSTest 3
  • 79. Fase 2: Maak je testplan VS VS VS ORIGINEEL A VARIANT B VARIANT C VARIANT D  Conversie-effect toewijzen  Hoge impact
  • 80. Fase 2: Maak je testplan Een testplan opzetten 1. VaststellenvandetestKPI’s 2. Eentestmethodekiezen 3. Testduurbepalen
  • 81. Fase 2: Maak je testplan ? ? ? Bron: vwo.com/ab-split-test-duration/
  • 82. Fase 2: Maak je testplan Periode: Afgelopen 30 dagen 277 pageviews per dag (totaal/30)
  • 83. Fase 2: Maak je testplan Periode: Afgelopen 30 dagen Conversiepercentagewinkelmand pagina: Aantal transacties / Aantal unieke paginaweergaven winkelmand (***/8308)*100% = **.**%
  • 84. Fase 2: Maak je testplan *** 12 ***
  • 85. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhalen Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. De succesvolle aanpak voor A/B-testen 1 2 3
  • 86. Fase 3: Testvarianten maken VS ORIGINEEL A VARIANT B  Korte testduur  Hoge impact
  • 87. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhalen Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. De succesvolle aanpak voor A/B-testen 1 2 3 4
  • 88. Fase 4: Zet je test live en monitor WACHT! Test voordat je écht live gaat nog het volgende:
  • 89. Fase 4: Zet je test live en monitor Test of alle elementenop je testpagina correct functioneren  Werken alle functionaliteitenop de testpagina nog?  Zijn er geen elementenverschoven?  Check verschillendebrowsers  Check verschillendebrowserversies (Internet Explorer)  Check de zoomfunctieper browser  Check verschillenderesoluties  Test op één device tegelijk, sluit andere devices uit.  Sluit buitenlandsverkeer uit  Sluit ander niet-relevantverkeer uit (per test afhankelijk)
  • 90. Fase 4: Zet je test live en monitor Koppelje testdataaan GoogleAnalytics
  • 91. Fase 4: Zet je test live en monitor Koppelje testdataaan GoogleAnalytics
  • 92. Fase 4: Zet je test live en monitor Monitoren 1. StatistiekeninA/Btestsoftware 2. StatistiekeninGoogleAnalytics 3. Verschillenhiertussen
  • 93. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhalen Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. De succesvolle aanpak voor A/B-testen 1 2 3 4 5
  • 94. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhalen Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. De succesvolle aanpak voor A/B-testen 1 2 3 4 5
  • 95. VS ORIGINEEL A VARIANT B  Korte testduur  Hoge impact Fase 5: Analyseer je testresultaten
  • 96. Fase 5: Analyseer je testresultaten
  • 97. Fase 5: Analyseer je testresultaten
  • 98. Fase 5: Analyseer je testresultaten Bron: abtestguide.com/calc/
  • 99. Fase 5: Analyseer je testresultaten
  • 100. Fase 5: Analyseer je testresultaten ORIGINEEL A
  • 101. Fase 5: Analyseer je testresultaten VARIANT B
  • 102. Fase 5: Analyseer je testresultaten
  • 103. Fase 5: Analyseer je testresultaten
  • 104. Fase 5: Analyseer je testresultaten Vergeet niet te segmenteren
  • 105. Fase 5: Analyseer je testresultaten Variant B Origineel A
  • 106. Fase 5: Analyseer je testresultaten Bron: abtestguide.com/calc/
  • 107. Fase 5: Analyseer je testresultaten Segmentatie mogelijkheden voor Analyse  Nieuwevsterugkerendebezoekers  Landen  Verkeersbronnen  Prijs-ofproductcategorieën  Leeftijdscategorieën
  • 108. Fase 5: Analyseer je testresultaten Let op!  Segmentenmoetengrootgenoegzijnomvalideconclusiestetrekken, anderseennieuwetestopzetten.  Controleer dezesteekproefgrootte meteentestduurcalculator  Controleer ofdeverbetering significantis  Controleer ofdoorvoeren geennegatief effect heeft opandere segmenten
  • 109. Fase 5: Analyseer je testresultaten ORIGINEEL A
  • 110. Fase 5: Analyseer je testresultaten VARIANT B
  • 111. Fase 5: Analyseer je testresultaten
  • 112. Fase 5: Analyseer je testresultaten + 3% X %
  • 113. Fase 5: Analyseer je testresultaten
  • 114. Fase 6: Voer je winnaar door of voer niet door Winnaar! Je hypothese is bevestigd!D e hypot hese isbevesti gdz D e hypo Geen winnaar! Je hypothese is niet bevestigd Verder analyseren (Learnings) Winnaar doorvoeren Verder analyseren (Learnings) Learnings post-testen/ Volgende A/B test
  • 115. 4. De succesvolleaanpak voor A/B-testen Bronnen voor conversieverbeteringen Inzichten Prioriteren Test backlog Hoog Laag Hypothese opstellen Testplan maken Testvariantenmaken A/B test live Analyseren Learnings delen Test herhale n Informeren team Rapportage o # bezoekers en conversie per variant o Segment analyse o Significantie niveau o Impact op KPI Verandering doorvoeren? Nee JaVerwerpenen naar volgende test Maakticket voor Development Hoog LIVE Change backlog o Webanalytics data o Interviewsmetklanten o Sessie recordinganalyses o Onsite klantfeedback o Usabilityonderzoek o Gedragsonderzoek o Analyse klantenservice vragen o Etc. 4. De succesvolle aanpak voor A/B-testen 1 2 3 4 5
  • 116. Bedankt voor je aandacht
  • 117. ADVIES // PRESENTATIE // VRAGEN Leverje VISITEKAARTJEin en ontvang alseersteGRATISdepresentatieinje mailbox OF LOOPLANGSDESTANDNR A27

Editor's Notes

  1. Insert your own photo and fill in the personal sheet.
  2. Insert your own photo and fill in the personal sheet.
  3. You can add any fact you like, but please keep this format.
  4. Standard “what do we do” slide.
  5. Standard “companies we work for” slide
  6. Veel voorbeelden gebruiken
  7. Standard slide to introduce new/other topic.
  8. Bij een A/B-test worden bezoekers verdeeld over het origineel (versie A) en een variant (versie B) Bijv. review blok vs geen review blok
  9. Bij een A/B-test worden bezoekers verdeeld over het origineel (versie A) en een variant (versie B)
  10. Bij een A/B-test worden bezoekers verdeeld over het origineel (versie A) en een variant (versie B)
  11. Bij een A/B-test worden bezoekers verdeeld over het origineel (versie A) en een variant (versie B)
  12. Standard slide to introduce new/other topic.
  13. Stel: In april conversie van 1 In mei voeg je een ... Toe aan je website Voila, het werkt, conversie gestegen met 50% dankzij ..., toch?
  14. Stel: In april conversie van 1 In mei voeg je een ... Toe aan je website Voila, het werkt, conversie gestegen met 50% dankzij ..., toch?
  15. Stel: In april conversie van 1 In mei voeg je een ... Toe aan je website Voila, het werkt, conversie gestegen met 50% dankzij ..., toch?
  16. Stel: In april conversie van 1 In mei voeg je een ... Toe aan je website Voila, het werkt, conversie gestegen met 50% dankzij ..., toch?
  17. Stel: In april conversie van 1 In mei voeg je een ... Toe aan je website Voila, het werkt, conversie gestegen met 50% dankzij ..., toch?
  18. Stel: In april conversie van 1 In mei voeg je een ... Toe aan je website Voila, het werkt, conversie gestegen met 50% dankzij ..., toch? Nee! We kunnen dit effect niet toewijzen aan deze wijziging, omdat er tal van andere factoren van invloed kunnen zijn op dit effect
  19. Sale
  20. Is er iets veranderd aan deze webshop? Nee! Is de conversie structureel verbeterd? Nee! Oorzaak: Sale (en mogelijk ook andere factoren)
  21. Door bezoekers te verdelen over een origineel (versie A) en een variant (versie B) met je A/B-testtool, sluit je andere factoren uit die impact op je conversie kunnen hebben, zoals.. Effect voor 100% toewijzen aan de door te voeren verbetering
  22. Oh ja, en het verbergen van de menu navigatie hebben we trouwens ook ge-AB test, het resultaat: Bij Bol.com werktie wel, bij deze shop niet. En dáárom is AB testen zo belangrijk!
  23. Bij Bol.com werktie wel, bij deze shop niet. En dáárom is AB testen zo belangrijk!
  24. Naast het uitsluiten van andere factoren, gebruiken we AB testing natuurlijk ook voor learnings
  25. Ander voorbeeld waarom we A/B testen: Daarnaast leer je jouw bezoekersgedrag beter begrijpen en kan je je learnings doorvoeren in andere marketingkanalen.
  26. Ander voorbeeld waarom we A/B testen: Daarnaast leer je jouw bezoekersgedrag beter begrijpen en kan je je learnings doorvoeren in andere marketingkanalen.
  27. Door bezoekers te verdelen over een origineel (versie A) en een variant (versie B) met je A/B-testtool, sluit je andere factoren uit die impact op je conversie kunnen hebben, zoals.. Effect voor 100% toewijzen aan de door te voeren verbetering
  28. Standard slide to introduce new/other topic.
  29. Uitleg geven bij piramide, piramide van Maslov. Uitleg geven waarom obstakels wel of niet A/B testen
  30. Standard slide to introduce new/other topic.
  31. Model introduceren
  32. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test. Voorbeeldcase: Lucardi
  33. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  34. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  35. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  36. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  37. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  38. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  39. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  40. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  41. Maar natuurlijk ook onze learnings uit andere A/B tests
  42. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  43. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  44. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  45. Heel veel inzichten, heel veel input aan verbeterpunten, WAARONDER de voorbeelden van zojuist, maar waar beginnen we?
  46. Blz 154/155, uitleg van de 3 factoren Orde, prioriteren
  47. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  48. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  49. Uitleg geven bij piramide, piramide van Maslov. Uitleg geven waarom obstakels wel of niet A/B testen
  50. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  51. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  52. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  53. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  54. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  55. De hypothese moet toetsbaar zijn waarbij kan worden bewezen of deze juist of onjuist is. Blz 150 Veel input/inzichten dankzij de analyses die zijn gedaan. Neem het voorbeeld van Lucardi: Analyses tonen aan dat veel bezoekers de winkelmand verlaten. Oorzaken: Onduidelijkheid over account aanmaken Onduidelijkheid over bestelling afronden
  56. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  57. Doelgroep expliciet noemen
  58. Zelfde voor toevoeging: Een account aanmaken is niet verplicht
  59. Zelfde voor toevoeging: Een account aanmaken is niet verplicht
  60. Zelfde voor toevoeging: Een account aanmaken is niet verplicht
  61. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  62. Door bezoekers te verdelen over een origineel (versie A) en een variant (versie B) met je A/B-testtool, sluit je andere factoren uit die impact op je conversie kunnen hebben, zoals.. Effect voor 100% toewijzen aan de door te voeren verbetering
  63. Door bezoekers te verdelen over een origineel (versie A) en een variant (versie B) met je A/B-testtool, sluit je andere factoren uit die impact op je conversie kunnen hebben, zoals.. Effect voor 100% toewijzen aan de door te voeren verbetering
  64. Test altijd de KPI die het dichts bij de bedrijfsdoelen komt Uiteindelijke doel altijd meer omzet Checken bij Jurjen: Omzetwaarde per bezoek vs conversie percentage afbeelding testdoelen van ctr naar customer lifetime CTR vs Conversie (ook afhankelijk van hoeveel conversies, aankoopproces (fietsenwinkel voorbeeld) Hoeveel conversies per maand? Causaliteit mail Voorbeelden noemen met verschillende hypothesen Voorbeeld geven primair en secundair meetdoel. Ik weet wat jullie willen horen: vuistregels, dus ik zal het proberen samen te vatten...
  65. Lucardi: omzet (op basis van conversiepercentage bij gelijkblijvende orderwaarde)
  66. Door bezoekers te verdelen over een origineel (versie A) en een variant (versie B) met je A/B-testtool, sluit je andere factoren uit die impact op je conversie kunnen hebben, zoals.. Effect voor 100% toewijzen aan de door te voeren verbetering
  67. 3 factoren Korte testuur (Snelheid) Conversie effect toewijzen (Wat heeft tot verbetering geleid) Hoge impact (Een groot verschil maken) Bij iedere test kun je er maar 2 van de 3 kiezen
  68. 1 element:
  69. Conversietraject, deze analyses. Hoe meer we met deze analyses dezelfde pijnpunten kunnen achterhalen, hoe krachtiger onze hypothese voor (hopelijk) winnende AB test.
  70. Hoge impact omdat we twee elementen testen waarvan we conversieverbetering verwachten Als we een verbetering aantonen weten we niet aan welke wijziging we het conversie-effect kunnen toewijzen
  71. Lange testduur
  72. Ook hier lange testduur nodig omdat bij meer varianten ook meer bezoekers en conversies nodig zijn voor een betrouwbaar resultaat
  73. Door bezoekers te verdelen over een origineel (versie A) en een variant (versie B) met je A/B-testtool, sluit je andere factoren uit die impact op je conversie kunnen hebben, zoals.. Effect voor 100% toewijzen aan de door te voeren verbetering
  74. Relevante, vergelijkbare periode pakken
  75. Hou je vast aan deze testduur! Niet langer dan 30 dagen testen
  76. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  77. Bij Lucardi hebben wij gekozen voor korte testduur met hoge impact. Als we een effect zien, kunnen we niet met zekerheid zeggen of de buttontekst of de microcpy voor dit effect heeft gezorgd. Voordeel, snel resultaat, snelle learnings, snel door naar de volgende test.
  78. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  79. Draai de test op je eigen IP adres en check:
  80. Visuals Analytics + Google Tag Manager
  81. Hanteer een marge van 5% is acceptabel
  82. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  83. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  84. Hoge impact omdat we twee elementen testen waarvan we conversieverbetering verwachten Als we een verbetering aantonen weten we niet aan welke wijziging we het conversie-effect kunnen toewijzen
  85. Voorbeelden Jurjen blz 159, 161, 162, 163, 164, 165
  86. Voorbeelden Jurjen blz 159, 161, 162, 163, 164, 165
  87. Voorbeelden Jurjen blz 159, 161, 162, 163, 164, 165
  88. Voorbeelden Jurjen blz 159, 161, 162, 163, 164, 165
  89. Voorbeelden Jurjen blz 159, 161, 162, 163, 164, 165
  90. Vuistregel: minimaal 300 conversies per variant
  91. Waar beginnen? Voorbeeld geven van data analyse + sessie recording + expert review = hypothese voor A/B test?
  92. Insert your own photo and fill in the personal sheet.
  93. Insert your own photo and fill in the personal sheet.
  94. Insert your own photo and fill in the personal sheet.