The document describes the evolution of web analytics and the author's role from 2008 to the present. It traces a progression from a solitary web analyst who passively collected and reported data, to becoming part of multi-disciplinary teams engaged in active experimentation and optimization efforts. The goal is for data and validation to drive the entire organization, with analytics experts supporting cross-functional teams.
11. ORGANISATIE
Team #1 Team #2 Team #3 Team #4 Team #5 Team #6 Team #7 Team #8 Team #9 Team #10
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
PO
CRO lead
Webanalist
Content
Designers
Developers
QA
CRO Centre of Excellence
o Enthousiasmerenexperimenteren& validatie
o Focus op standaardisatie & kwaliteit (proces en tools)
o Sturenop programmaoutput
o Creërenen opleiden van teams
13. GEAVANCEERDE A/B-TEST SET-UP
o Testgroep pas bepalen nadat test
element in beeld is
o Extra metingen in de A/B-test, voor
het meten van gedragsverandering
17. BEDRIJFSBREED CRO DATABASE
Éen plek voor:
o De status, details en resultaten van elke
test.
o Een CRO dashboard met # testen,
succesratio, implementatieratio et cetera.
o Custom views (per team / apart board voor
winnaars en learnings en bijv. resultaten
per psychologisch principe).
o Deelbaar testidee formulier.
Maar om van start te gaan… mij is gevraagd een presentatie te geven over mijn visie op webanalytics. Ik wil jullie graag meenemen in de reis die zowel webanalytics als ik hebben afgelegd de afgelopen jaren. Ik zal kort stilstaan bij wat er de afgelopen 10 jaar is gebeurd en jullie meenemen in waar ik nu mee bezig ben.
Goedemorgen allemaal,ten eerste wil ik even kwijt dat ik natuurlijk enorm vereerd ben en trots dat ik hier mag staan als 1 van de laatste 3 overgebleven kandidaten voor de MOAward voor beste webanalist van het jaar. En helemaal om te zien dat 2 van de 3 kandidaten vrouw zijn. Wat niet voor zich spreekt aangezien zowel online als datafuncties vaak door mannen worden bekleed. Jullie als jury zijn ook het levende bewijs, met maar 1 vrouwelijk jurylid . So let’s the best women win ;)
Mijn reis begon in 2008 toen ik net was afgestudeerd aan de universiteit van Tilburg voor de Masters Leisure Studies en Marketing Management. Bij OTTO ben ik begonnen als database marketer, wat betekende dat ik klantselecties moet doen voor de verschillende catalogi die werden verstuurd op basis van RFM analyses. En marketing acties bedenken om klanten loyaler te maken. Er was nog heel weinig focus op online, terwijl toch al 50% van de orders online warden gedaan.
Na bijna 2 jaar ben ik bij Tribal Internet Marketing terechtgekomen in de rol van Webanalytics concultant. In de praktijk kwam het erop neer dat ik met name Google Analytics implementaties aan het doen was en maandrapportages aan het opleveren was. Er was nog heel weinig aandacht voor het proactief gebruiken van webstatistieken, maar veel was gefocused op analyses achteraf.
Webanalyse was nog erg reactief. Data werd verzameld en gerapporteerd, maar er werd nog maar weinig geacteerd op deze data.
Dat veranderde vanaf 2011 – in ieder geval voor mij. Als webanalist intern bij Kras kon ik veel proactiever aan het werk met de data. Er lag een grote bak aan webanalytics data waar nog nooit goed naar gekeken was. Ik was namelijk de eerste webanalist die was aangetrokken.
Enkel voor de online marketing campagnes werd gekeken in Google Analytics. Daar heb ik me dan ook volledig gestort op het inzichtelijk maken van klantgedrag. Daar hoorde natuurlijk ook dashboarding bij en periodieke rapportages, maar met name het maken van gedragsanalyses: hoe gebruiken klanten de website van Kras en waar zitten verbeterpunten? In dit tijd zijn we ook gestart met op kleine schaal A/B-testen.
Webanalyse werd in die tijd dus veel meer Proactief versus het eerdere reactief. In plaats van (of eigenlijk naast) enkel rapporteren op data werd er echt geanalyseerd wat er gebeurde. En aan de hand van die analyses werden verbeterplannen bedacht en uitgevoerd. We gingen dus van CRAP naar CARE.
In 2014 heb ik de overstap gemaakt naar Online Dialogue – waar Maurice in die tijd mijn baas ook was. De nieuwe CEO van Kras geloofde niet in A/B-testen en wilde me terugdrukken in het CRAP hoekje, maar daar zat ik niet meer op te wachten.
Bij Online Dialogue heb ik met een multidisciplinair team – met rollen voor design, psychologie, development, QA en strategie en webanalyse meer dan 400 A/B-testen uitgevoerd voor verschillende klanten in diverse branches. In eerste instantie werd CRO nog veel geoutsourced, maar gedurende de jaren werd de klantvraag steeds vaker om CRO intern te plaatsen en teams dus op te leiden.
In die periode ben ik me zodoende ook veel meer gaan bezighouden met het geven van workshops en presentaties en bloggen over conversie optimalisatie.
En ik heb de Bayesian Abtest calculator opgezet, omdat we merkten dat de frequentistische statistiek heel lastig te verkopen is naar hoger management.
Webanalyse heeft zich in die tijd ontwikkeld van Reactief, naar Proactief naar Predictief. Er is veel vaker een experimental mindset: we verzamelen data, we analyseren de data en gaan dan niet over tot actie, maar komen met hypotheses wat beter zou kunnen werken. Dit proberen we dan te valideren met een experiment.
Na 3 jaar Online Dialogue kwam er een uitdaging op mijn pad die ik niet wilde laten liggen. Ik mocht bij Tix een A/B-test programma op gaan zetten – helemaal from scratch! De PO’er draaide eerder enkel sporadisch een testje via Optimizely, maar daar zat total geen strategie achter.
Met een klein team van nog 1 conversie specialist (met een achtergrond in psychologie), een UX’er, een dedicated developer en een QA’er hebben we in een kleine 2 jaar bijna 250 testen gedaan met geode resultaten, die ik jammer genoeg niet meer met jullie mag delen.
GTM verdieping
jQuery / html / CSS
Ik had graag langer bij Tix willen blijven om mijn ambitie waar te kunnen maken: om van Tix een datagedreven organisatie te maken, maar mijn ambitie om het team te laten groeien kwam niet van de grond door bezuinigingen.
Ik heb zodoende eieren voor mijn geld gekozen en ik werd al snel benaderd om bij VodafoneZiggo aan de slag te gaan. Bij VodafoneZiggo zit ik in het expert team en coach meerdere multidisciplinaire scrumteams.
De organisatie is als volgt opgezet. Er zijn nu 10 teams in Digital die volgens de scrum method werken.
De moonshot is toch wel dat er niet meer 1 analist of een groep analisten of een klein multidisciplinair team verantwoordelijk is voor de inzichten uit data en verbetervoorstellen, maar dat de hele organisatie datadriven / validatie gedreven werkt. Daar zijn we zeker nog niet, maar het is altijd mooi om te dromen van een reis naar de maan.