Testen na het ontwerp is geen optimalisatie, maar duurbetaalde validatie
Dertig mensen die binnen hun organisatie verantwoordelijk zijn voor experimenteren, conversie en groei kwamen in september in Porto bij elkaar, en de meest herkenbare klacht ging niet over tooling of statistiek. Het ging over timing. Conversie-expertise wordt pas aangehaakt wanneer het ontwerp af is, de campagne gepland staat of de nieuwe checkout klaar is om live te gaan. De A/B-test mag dan nog bewijzen dat de keuze die al gemaakt is, de juiste was. Dat is geen experiment, dat is een rituele goedkeuring achteraf.
Het mechanisme erachter is simpel en pijnlijk. Zodra er ontwerp- en developmenturen in een oplossing zitten, verandert de vraag die de test moet beantwoorden. Vooraf luidt die vraag: welk probleem heeft de shopper eigenlijk in stap drie van onze funnel? Achteraf luidt die vraag: haalt deze variant het significantieniveau? Wie pas in de tweede fase mag meekijken, kan alleen nog marginale verbeteringen voorstellen aan iets dat misschien nooit gebouwd had moeten worden. En een test die verliest op een net opgeleverde feature wordt zelden teruggedraaid, want het budget is al uitgegeven. Zo wordt experimenteren een kostenpost in plaats van een stuurinstrument.
Onderzoek de aanname voordat je de code schrijft
De omkering die in Porto werd beschreven kost op korte termijn meer en levert op langere termijn meer omzet op. Toets aannames met klantgesprekken, prototypes of een klein experiment voordat er een regel code wordt geschreven. In de praktijk betekent dat bijvoorbeeld: voordat je een account-verplichting of een nieuw adresveld toevoegt aan je checkout, meet je eerst waar shoppers nu afhaken en waarom. Een sessieopname van vijftig mobiele bezoekers die vastlopen op postcodevalidatie vertelt je binnen een dag meer dan een driewekelijkse test op een al gebouwde variant.
Hetzelfde geldt voor de payment mix. De aanname dat een extra betaalmethode altijd meer conversie oplevert, houdt lang niet altijd stand. Elke extra logo-rij in je betaalstap kost keuzetijd en kan juist twijfel introduceren bij shoppers die anders zonder nadenken op iDEAL hadden geklikt. Dat is precies het type vraag dat je met een prototype of een kleine live test beantwoordt voordat de integratie en de fraudeprofielen zijn ingericht, niet erna.
Reserveer ruimte in de sprint, anders gebeurt het niet
Een testtool lost niets op wanneer marketing stuurt op klikken, product op opgeleverde functionaliteit en e-commerce op omzet. Dan concurreert elk inzicht met een roadmap die al vol staat. De deelnemers die dit hadden doorbroken, deden dat niet met een briljant CRO-team aan de zijlijn maar met saaie, structurele afspraken. Vaste experimenteerruimte in elke ontwikkelsprint. Een Experiment Canvas dat slecht onderbouwde verzoeken tegenhoudt voordat ze de backlog bereiken. Gedeelde KPI’s die marketing, product, data en e-commerce aan dezelfde uitkomst hangen. Ergens anders leidde een gesprek met de cfo tot structureel budget voor UX en development.
Die laatste is interessanter dan hij klinkt. Zodra experimenteren een eigen budgetregel heeft, hoeft het niet telkens opnieuw te worden bevochten tegen een campagne of een releaseplanning. En het dwingt tot een gesprek over wat een experiment waard is in euro’s, niet in uplift-percentages. Een checkoutstap die je verwijdert en die 1,2 procent meer afgeronde orders oplevert, is op een jaaromzet van tien miljoen euro al snel ruim honderdduizend euro. Dat getal overtuigt een financiële directie sneller dan een grafiek met conversieratio’s.
Eén vraag bleek in Porto opvallend effectief om vast te lopen gesprekken open te breken: heb je het ze al verteld? Veel teams houden hun resultaten binnen het eigen domein. Een leerervaring over mobiele formulierinvoer die alleen in een CRO-rapportage belandt, verandert niets aan hoe het volgende team zijn volgende formulier bouwt.
Reken ook mee wat je niet hebt gebouwd
Experimenteren wordt bijna altijd verkocht met winnaars. Deze test leverde zoveel procent extra omzet op, die test zoveel. De interessantere kant kwam ook ter sprake: experimenteren als vangnet. Een campagne die bij nameting bleek te kannibaliseren op bestaande omzet werd gestopt. Een functionaliteit die niemand gebruikte kon zonder risico worden verwijderd. Ideeën die nooit development haalden omdat vooronderzoek al liet zien dat de kans klein was.
Die bespaarde euro’s staan zelden in een CRO-dashboard, en dat is een gemiste kans. Een feature die drie sprints zou kosten en die je op basis van vijf klantgesprekken schrapt, levert direct aantoonbaar ontwikkelcapaciteit op die naar iets anders gaat. Bij elkaar opgeteld kan die vermeden schade groter zijn dan de opbrengst van alle winnende tests samen. Begin met het simpelweg bijhouden van een lijst: welke ideeën zijn dit kwartaal gesneuveld vóór development, en wat zou het hebben gekost om ze te bouwen? Die lijst is je sterkste argument in het volgende budgetgesprek.
AI versnelt je proces, het repareert het niet
De deelnemers zetten AI al in voor code, copy, trackingimplementatie, analyses, documentatie en kwaliteitscontroles. Dat levert snelheid op. Het levert geen kwaliteit op wanneer rollen, KPI’s en besluitvorming onduidelijk zijn, want dan automatiseer je vooral de bestaande chaos. Tien keer zoveel testvarianten genereren terwijl niemand weet welk probleem je oplost, geeft je tien keer zoveel ruis.
Meet de volwassenheid van je experimenteerproces daarom niet aan je testvolume. Vier vragen zeggen meer. Worden aannames onderzocht voordat er gebouwd wordt? Is er vaste ontwikkelruimte gereserveerd voor experimenten? Leren marketing, product en e-commerce samen van dezelfde uitkomsten? En wordt zichtbaar gemaakt welke kosten je hebt voorkomen? Scoor je op drie van de vier een nee, dan is een extra testtool of een extra AI-laag niet je knelpunt.
Begin klein en concreet. Kies één aanstaande wijziging in je checkout of betaalstap die nu op de roadmap staat, en vraag je af welk shopperprobleem die wijziging oplost. Als je dat niet in één zin met data kunt onderbouwen, schuif de bouw dan twee weken op en onderzoek het eerst. Dat is goedkoper dan een test die achteraf mag bewijzen dat je gelijk had.
Bron: twinklemagazine.nl
