5 september 2014 
A/B testing 
Tim van IJsendoorn
Which test won? 
 Winnaar: 
versie A 
+64% 
- Context! 
- CTA’s 
- Video 
A/B testing
A/B testing 
Which test won? 
VERSIE 
A 
VERSIE 
B 
vs. 
• Winnaar: versie B +38% 
- Kortere paginatitel 
- Belangrijkste kenmerken benadrukken 
- Effectievere informatieoverdracht
A/B testing 
Which test won? 
VERSIE 
A 
vs. 
• Winnaar: versie A +115% 
VERSIE 
B 
- Stem de titel van je landingspagina af op je boodschap
A/B testing 
Agenda 
 Intro: overtuigingspsychologie 
• Beïnvloedingsprincipes van Cialdini 
• Persuasion Design 
 A/B testing 
• Conversie optimalisatie proces 
• A/B versus MVT 
• Tools 
 Case & Best Practices 
• Testresultaten JohnBeerens.com 
• Doelen, formulieren, buttons, etc. 
• Ontwikkelingen en leestips 
 Demo Visual Website Optimizer
A/B testing 
Beïnvloedingsprincipes 
 Reciprocity 
 Commitment/Consisten 
cy 
 Social Proof 
 Authority 
 Liking 
 Scarcity
Persuasion Design 
Behavioral Change = Motivation + Ability + 
Trigger 
Motivation 
Online marketing 
Ability + 
+ 
- 
“No” 
“Yes” 
Trigge 
r 
Interaction/ 
UX design 
Overtuigings-psychologie 
B.J. Fogg 
Stanford University 
A/B testing
A/B testing 
Conversie optimalisatie proces 
1. Bedrijfsdoelstellingen, strategie en 
conversiedoelen 
2. Meten en analyseren huidig gedrag 
3. Inventarisatie kansen en 
verbeterpunten 
4. Prioriteren 
5. Tests opzetten 
6. Bijsturen en optimaliseren
A/B testing 
A/B versus MultiVariate Testing 
A/B Testing 
- Weinig traffic 
nodig 
- Optie tot split- 
URL 
Multivariate Testing 
- Veel traffic nodig 
- Meerdere elementen 
Bezoekers 
Versie A 
20% 
conversie 
Versie B 
25% 
conversie 
Bezoekers 
Titel 1 Titel 1 Titel 2 Titel 2 
Afb. 1 Afb. 2 Afb. 1 Afb. 2
A/B testing 
Tools 
 Wat doen mijn bezoekers? 
• Webstatistieken (Google Analytics, Adobe Analytics, 
Comscore) 
 Waarom converteren mijn bezoekers 
niet? 
• User Surveys (Surveymonkey / 4Q Survey / UserReport / 
Qualaroo) 
• Usability testing (Usabilla, Kampyle) 
• Social intelligence (Radian6 / Coosto / Followerwonk) 
• Visitor recordings (ClickTale / Crazyegg / Mouseflow / 
Eyetracking)
A/B testing 
Tools 
User Report
A/B testing 
Tools 
Mouseflow
A/B testing 13 
Tools 
Eyetracking
A/B testing 
Case, Tips & Tricks
A/B testing 
Test: buttons 
-23% Control 
+ 
18%
A/B testing 
Test: afbeeldingen
Test: actielabels 
Tips: 
• minder velden (+43%) 
• passende/dynamische 
kop 
• positieve validatie 
(vinkjes) 
• actieve buttontekst 
A/B testing
A/B testing 
Best practice: doelen 
Tips: 
• Stel doeltrechters 
in 
• Geef 
doelwaarden op 
• Kijk ook naar 
microconversies
Best practice: formulieren 
Tips: 
• minder velden +43% 
• autofill / autocomplete 
• passende/dynamische 
kop 
• positieve validatie 
(vinkjes) 
• actieve buttonteksten 
A/B testing
A/B testing 
Best practice: positie op de pagina 
+32 
%
A/B testing 
Best practice: Facebook apps / 
CTA’s 
Tips: 
• Contras 
t 
• Focus 
op CTA 
+69%
A/B testing 
Best practice: landingspagina’s 
• Duidelijke call-to-action 
• Doseer kleurgebruik 
• Afstand/ruimte tussen 
elementen 
• Belangrijkste content 
above the fold (links) 
• Formulier met 
achtergrondkleur 
• Handgeschreven 
teksten met pijl
A/B testing 
Best practice: Perceptual Contrast
A/B testing 
Ontwikkelingen 
• Personalisatie 
• Persuasion profiling 
• Dynamic content 
• Real-time targeting 
• Omni-channel 
• Customer Experience 
• Loyalty
A/B testing 
Leestips 
• Influence: The Psychology of Persuasion – Robert 
Cialdini 
• Digitale Verleiding - Maurits Kaptein 
• Don’t Make Me Think! - Steve Krug 
• Thinking, Fast and Slow – Daniel Kahneman 
• Persuasive Technology – B.J. Fogg 
• Landing Page Optimization – Tim Ash 
• You Should Test That – Chris Goward 
• Webs of Influence - Nathalie Nahai 
http://www.marketingfacts.nl/berichten/de-kracht-van-ab-testen/
A/B testing 
Demo Visual Website Optimizer
A/B testing 
Tim van IJsendoorn 
Senior Online Marketeer 
tim@fingerspitz.nl 
http://nl.linkedin.com/in/timvanijsendo 
orn 
076 – 763 06 00 
info@fingerspitz.nl 
www.fingerspitz.nl 
Reduitlaan 29 
4814 DC Breda 
The Netherlands 
@fingerspitzNL 
fb.com/fingerspitz

AB testing workshop MUG 20140905

  • 1.
    5 september 2014 A/B testing Tim van IJsendoorn
  • 2.
    Which test won?  Winnaar: versie A +64% - Context! - CTA’s - Video A/B testing
  • 3.
    A/B testing Whichtest won? VERSIE A VERSIE B vs. • Winnaar: versie B +38% - Kortere paginatitel - Belangrijkste kenmerken benadrukken - Effectievere informatieoverdracht
  • 4.
    A/B testing Whichtest won? VERSIE A vs. • Winnaar: versie A +115% VERSIE B - Stem de titel van je landingspagina af op je boodschap
  • 5.
    A/B testing Agenda  Intro: overtuigingspsychologie • Beïnvloedingsprincipes van Cialdini • Persuasion Design  A/B testing • Conversie optimalisatie proces • A/B versus MVT • Tools  Case & Best Practices • Testresultaten JohnBeerens.com • Doelen, formulieren, buttons, etc. • Ontwikkelingen en leestips  Demo Visual Website Optimizer
  • 6.
    A/B testing Beïnvloedingsprincipes  Reciprocity  Commitment/Consisten cy  Social Proof  Authority  Liking  Scarcity
  • 7.
    Persuasion Design BehavioralChange = Motivation + Ability + Trigger Motivation Online marketing Ability + + - “No” “Yes” Trigge r Interaction/ UX design Overtuigings-psychologie B.J. Fogg Stanford University A/B testing
  • 8.
    A/B testing Conversieoptimalisatie proces 1. Bedrijfsdoelstellingen, strategie en conversiedoelen 2. Meten en analyseren huidig gedrag 3. Inventarisatie kansen en verbeterpunten 4. Prioriteren 5. Tests opzetten 6. Bijsturen en optimaliseren
  • 9.
    A/B testing A/Bversus MultiVariate Testing A/B Testing - Weinig traffic nodig - Optie tot split- URL Multivariate Testing - Veel traffic nodig - Meerdere elementen Bezoekers Versie A 20% conversie Versie B 25% conversie Bezoekers Titel 1 Titel 1 Titel 2 Titel 2 Afb. 1 Afb. 2 Afb. 1 Afb. 2
  • 10.
    A/B testing Tools  Wat doen mijn bezoekers? • Webstatistieken (Google Analytics, Adobe Analytics, Comscore)  Waarom converteren mijn bezoekers niet? • User Surveys (Surveymonkey / 4Q Survey / UserReport / Qualaroo) • Usability testing (Usabilla, Kampyle) • Social intelligence (Radian6 / Coosto / Followerwonk) • Visitor recordings (ClickTale / Crazyegg / Mouseflow / Eyetracking)
  • 11.
    A/B testing Tools User Report
  • 12.
  • 13.
    A/B testing 13 Tools Eyetracking
  • 14.
    A/B testing Case,Tips & Tricks
  • 15.
    A/B testing Test:buttons -23% Control + 18%
  • 16.
    A/B testing Test:afbeeldingen
  • 17.
    Test: actielabels Tips: • minder velden (+43%) • passende/dynamische kop • positieve validatie (vinkjes) • actieve buttontekst A/B testing
  • 18.
    A/B testing Bestpractice: doelen Tips: • Stel doeltrechters in • Geef doelwaarden op • Kijk ook naar microconversies
  • 19.
    Best practice: formulieren Tips: • minder velden +43% • autofill / autocomplete • passende/dynamische kop • positieve validatie (vinkjes) • actieve buttonteksten A/B testing
  • 20.
    A/B testing Bestpractice: positie op de pagina +32 %
  • 21.
    A/B testing Bestpractice: Facebook apps / CTA’s Tips: • Contras t • Focus op CTA +69%
  • 22.
    A/B testing Bestpractice: landingspagina’s • Duidelijke call-to-action • Doseer kleurgebruik • Afstand/ruimte tussen elementen • Belangrijkste content above the fold (links) • Formulier met achtergrondkleur • Handgeschreven teksten met pijl
  • 23.
    A/B testing Bestpractice: Perceptual Contrast
  • 24.
    A/B testing Ontwikkelingen • Personalisatie • Persuasion profiling • Dynamic content • Real-time targeting • Omni-channel • Customer Experience • Loyalty
  • 25.
    A/B testing Leestips • Influence: The Psychology of Persuasion – Robert Cialdini • Digitale Verleiding - Maurits Kaptein • Don’t Make Me Think! - Steve Krug • Thinking, Fast and Slow – Daniel Kahneman • Persuasive Technology – B.J. Fogg • Landing Page Optimization – Tim Ash • You Should Test That – Chris Goward • Webs of Influence - Nathalie Nahai http://www.marketingfacts.nl/berichten/de-kracht-van-ab-testen/
  • 26.
    A/B testing DemoVisual Website Optimizer
  • 27.
    A/B testing Timvan IJsendoorn Senior Online Marketeer tim@fingerspitz.nl http://nl.linkedin.com/in/timvanijsendo orn 076 – 763 06 00 info@fingerspitz.nl www.fingerspitz.nl Reduitlaan 29 4814 DC Breda The Netherlands @fingerspitzNL fb.com/fingerspitz

Editor's Notes