Your SlideShare is downloading. ×
0
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
SiteSpect - Frank Overbeek
Upcoming SlideShare
Loading in...5
×

Thanks for flagging this SlideShare!

Oops! An error has occurred.

×
Saving this for later? Get the SlideShare app to save on your phone or tablet. Read anywhere, anytime – even offline.
Text the download link to your phone
Standard text messaging rates apply

SiteSpect - Frank Overbeek

633

Published on

Published in: Business
0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total Views
633
On Slideshare
0
From Embeds
0
Number of Embeds
0
Actions
Shares
0
Downloads
5
Comments
0
Likes
0
Embeds 0
No embeds

Report content
Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
No notes for slide
  • AB/MVT Targeting
  • AB/MVT Targeting
  • let me take you
  • About conversion. Not best practices, more at strategic level short presentation
  • Most of the traffic comes directly. Large group through banners and links. As well as localized
  • Going through the effort of building a mobile site.
  • Source: http://www.comscore.com/Press_Events/Press_Releases/2010/6/The_iPhone_Reality_in_Europe_Low_Overall_Penetration_Enormous_Impact

    Mobile segment , many people direct through internet

    Look at your own data


  • Figures may be different in EU. Overall usage through mobile groing

    Lot of money to be made
  • 400 items on site\

    Zooming in

    326 dpi display desity. Still hard to read

  • A lot of activities going on at the site

    If they would just risjk it fully, do not know to be successful

    Clear descision, business case
  • Not to much zoom

    100 things to do even weddings

    Need to be congitive not to much text input
  • AB and MVT test always foundation in hypothesis

    Descision on most important items

    Lot of funtional elements want to ow cost low effort solution

    Reformat

    2 weeks , from descision to build an do

    1 day analyst and technician to have test designed

  • Middle hotel search tool

    Right shows

    1 step down , original backend
  • 6 weeks running

    First 2 steps engagemnent

    3th outcome * backend stays as is

    Helpiong people motivate to move on

    Invested in interaction

    Even backend ‘old fashoined’
  • 32
  • Transcript

    • 1. A/B en Multi Variate Testen (MVT)
    • 2. Frank Overbeek SiteSpect Europe
    • 3. A/B Testen voor strategisch beslissen
    • 4. Case Het VEGAS.com Mobiele Dilemma
    • 5. Wat is VEGAS.com? • ‘s Werelds grootste op een stad georiënteerde web site (~10m uniek/maand.) • Verkoopt “everything Vegas”, van hotel to vakantie pakketten, shows en restaurants tot excursies en meer. • Primair: www.vegas.com and www.lasvegas.com
    • 6. De brandende vraag: Moet de website beschikbaar/aangepast worden voor mobiele aparaten als iPhones, Android, RIM, etc? Dilemma:
    • 7. Wie gebruikt zijn/haar mobiel voor het web? Wie voert hiermee transacties uit? Vraag..
    • 8. Recente gegevens van comScore (EU) 53%
    • 9. • Mobiele bezoekers vormen 7% van het verkeer – 70% iPhone, 20% Android, ~10% anders • Mobiele segment groeit met 6% per maand • Mobiele bounce rate 50% hoger dan non-mobiele • De mobiele bezoeker vertegenwoordigd omzet($$$) VEGAS.com’s web analytics
    • 10. Te klein voor 326 dpi!
    • 11. Tijd om mobiel aandacht te geven • VEGAS.com’s team realiseerde dat het tijd was om de voor en nadelen van het mobiliseren van de site te bekijken. – Investeren van tijd en geld – De bestaande ontwikkelingen aanhouden – Risico dat het niets opbrengt of zelfs minder
    • 12. Wat betekent mobiliseren? • Past op een klein scherm zonder scaling/zoom • Focus op de primaire functies • Low-fat (beperkte graphics, scripts en andere zaken welke de page load and rendering vertragen) • Werkt goed met een touch screen (niet te veel formulier)
    • 13. Overwegingen • Een test uitvoeren om te zien of mobiele content uitmaakt, en hoeveel.. (hypothese) • Focus op de key content die al gebruikt wordt op de mobiel: – Homepage – Top-level categorie pagina’s – Hotelkamers zoeken • Beperking: geen wijziging aan de e-commerce architectuur • Gebruik een applicatie om mobiele templates die de full site content “skinnen” en de ‘mobiele klant’ target.
    • 14. Technologie Experiment variatie Server(s) Targeting
    • 15. “De nieuwe” mobiele test pagina’s
    • 16. A/B test resultaten: mobiel vs. volle site • De A/B test liep nog geen twee maanden • Van ontwerp tot live, 2 weken • Key metrics voor de mobiele versie – 22% lagere bounce rate – 16% meer pageviews op de product categorieen – Double-digit groei in conversie* (* originele backend proces) • Alles met 95% of hogere significantie
    • 17. Learnings • Mobiel is er echt … nu echt ... ;). • De vraag voor eenieder: – Moeten we investeren in het mobiliseren? – Wanneer? – Hoe volledig? • Kijk naar uw KPIs in het mobiele segment • Begin klein… – Is het mogelijk een test op een beperkt content(gebied) uit te voeren, om in een hypothese te bewijzen dat mobificatie de UX/performance/conversie verbeterd? • Baseer de investering op interne/externe data and analyse
    • 18. Multi Variate Testen Wat, Hoe, Waarom?
    • 19. “Het (on-line, geautomatiseerd) aanbieden en variëren en van communicatie componenten*, met als doel; de analyse van het veroorzaakte gedrag van de ontvangende partij’, om zo de bewezen optimale communicatie/conversie* te bepalen”. Definitie
    • 20. Marketing Instrument
    • 21. Plaats in de keten UsabilityUserexperience Analytics MVT ProductionDevelopment Feedback Stated preference Actual preference
    • 22. •Welke conversiedoelen / response willen we bereiken? •Welke factoren willen we onderzoeken die effect hebben op de doelen/respons? •Welke variaties kunnen deze factoren hebben? •Welke additionele segment karakteristieken hebben daarnaast invloed op de conversie? Componenten van Experiment
    • 23. Test factoren en variaties Segment variabelen Klantgedrag De resultaten die je zoekt om sitegedrag te begrijpen en te optimaliseren Zaken binnen mijn controle (X) Zaken buiten mijn controle (Z) Uitkomst (Y) Optimalisatie
    • 24. High value klanten nemen het duurdere aanbod, twee keer zo veel als low value klanten.Voorbeeld: Onderwerp OnderwerpVergelijking Attribuut 4 ingrediënten voor Hypothesen Goede hypothesen bestaan uit: a) Een doelgroep (Z) • Ofwel een complete groep of sub-segmenten van de groep b) Een meetbare uitkomst (Y) • Een uitkomst binnen het klant keuzeproces c) Een vergelijking (<>) • Meer dan, minder dan, hetzelfde, etc d) Een variabel attribuut (X) • Het element wat het keuzeproces van de klant beïnvloed
    • 25. Voorbeeld Hypothesen Afbeeldingen van succesvolle mensen heeft een positief effect op de conversie Het verstrekken van sociale informatie heeft een positieve invloed op de conversie: ‘we hebben al xxx beleggers geinteresseerd’ , ‘een totaal bedrag van xxx is reeds belegd’ , ‘een gemiddeld rendement van xxx is behaald’. Klanten hebben behoefte aan procesinfo: Het toelichten van het procesverloop op voorhand zal een hogere conversie bewerkstelligen.
    • 26. Wat testen? • Visuele aspecten • Textuele aspecten • Contextuele aspecten • Informatie vormen/volume • Technische aspecten • Persuasiveness
    • 27. Lengte van de test • Aantal Factoren (Elementen) • Aantal Variaties • Aantal Bezoekers • Aantal Conversies • Confidence level (%) • Tot statistische relevantie..
    • 28. Succesfactoren • Organisatie klaar (analytics) • Ownership FTE(s) • Onbeantwoorde vragen • Lichte tests beginnen • Open Blik • Ook nee is een antwoord • Creativiteit • Juiste Tool
    • 29. Hoe werkt het? web server content server
    • 30. Experiment variaties Hoe werkt het; op pagina niveau Server(s) Ref=Tijger
    • 31. Interactief / Demo
    • 32. Vragen

    ×