Ga naar inhoud

10.5 Beslissingen nemen op data

Data verzamelen is makkelijk; er goed naar handelen is moeilijk. De meeste ondernemers reageren op ruis (een slechte dag, een toevallige piek) of verdrinken in dashboards zonder ooit te beslissen. Dit hoofdstuk geeft je een ritme, een denkkader en een logboek om van cijfers naar betere keuzes te komen — zonder in analyseverlamming te belanden.

Na dit hoofdstuk kun je:

  • Je onderscheidt signaal van ruis door de procentuele verandering altijd tegen het onderliggende volume te leggen.
  • Je hanteert een review-ritme (dagelijks, wekelijks, maandelijks) en matcht de frequentie aan de volatiliteit van het cijfer.
  • Je werkt van vraag naar beslissing: lokaliseren met de KPI-boom, een hypothese met drempel formuleren en kiezen tussen handelen, testen of negeren.
  • Je herkent de klassieke denkfouten (correlatie versus causatie, survivorship bias, overfitting op ruis) en checkt erop.
  • Je legt beslissingen en hypotheses vast in een experiment-logboek om dezelfde fout niet twee keer te maken.

Signaal versus ruis. Signaal is een echte, herhaalbare verandering; ruis is toevallige variatie. Eén dag met conversie 1,2% in plaats van 2,0% is bijna altijd ruis. Twee weken structureel lager is signaal.

Statistische significantie. De mate waarin een verschil waarschijnlijk niet door toeval komt. Bij A/B-tests gangbaar bij 95% betrouwbaarheid en voldoende steekproef (zie 5.2 A/B-testen).

Beslisdrempel. Een vooraf afgesproken grens die bepaalt wélke actie volgt. Zonder drempel staar je naar cijfers; mét drempel handel je.

Correlatie versus causatie. Twee dingen die samen bewegen, hoeven elkaar niet te veroorzaken. Omzet en advertentie-uitgaven stijgen in december allebei — door het seizoen, niet noodzakelijk door elkaar.

Survivorship bias. Je kijkt alleen naar de “overlevers” (klanten die kochten, producten die bleven) en mist wat wegviel. Daardoor trek je te rooskleurige conclusies.

Overfitting op ruis. Je trekt een conclusie uit te weinig data, bijvoorbeeld een “winnaar” verklaren na 40 bezoekers per variant.

Beslissen op data werkt alleen met een vast ritme. Bekijk de juiste cijfers op de juiste frequentie — niet alles elke dag.

Dagelijks (5 minuten). Alleen alarmcijfers: omzet, adspend, blended MER vandaag versus gisteren en versus dezelfde dag vorige week. Doel: niets is kapot (tracking, betaalmethode, een ontspoorde campagne). Géén optimalisatiebeslissingen.

Wekelijks (30 tot 45 minuten). De stuurcijfers: conversieratio, AOV, CAC, MER, funnel-stappen, retouren. Vergelijk met vorige week en het 4-weeks-gemiddelde. Hier neem je tactische beslissingen: een campagne pauzeren, een CRO-test starten, een aanbod aanpassen.

Maandelijks (1 tot 2 uur). De strategische cijfers: cohorten, LTV:CAC, voorraadrotatie, brutomarge, aandeel herhaalomzet. Hier beslis je over budgetverdeling, assortiment en groeirichting.

Stap-voor-stap: van cijfer naar beslissing

Section titled “Stap-voor-stap: van cijfer naar beslissing”
  1. Stel eerst de vraag, dan kijk je naar data. “Waarom daalde mijn conversie?” stuurt je naar de funnel. Zonder vraag dwaal je door dashboards.

  2. Check of het signaal of ruis is. Is de verandering groot genoeg, lang genoeg, en gebaseerd op genoeg waarnemingen? Eén dag of 50 sessies is ruis.

  3. Lokaliseer met de KPI-boom. Splits het probleem op (zie 10.1): minder sessies, lagere conversie, of lagere AOV?

  4. Zoek de oorzaak, niet de correlatie. Wat veranderde er werkelijk in die periode? Een prijswijziging, een nieuwe campagne, een gebroken event?

  5. Formuleer een hypothese met een drempel. “Als ik de verzendkosten gratis maak boven 50 euro, stijgt mijn AOV naar minstens 55 euro.”

  6. Beslis: handelen, testen of negeren. Klein en omkeerbaar → gewoon doen. Groot of onzeker → eerst testen. Ruis → negeren.

  7. Log de beslissing. Schrijf op wat je deed en waarom, zodat je later kunt zien of het werkte (zie het logboek-sjabloon).

  8. Evalueer op de afgesproken datum. Kom terug op je hypothese en bevestig of verwerp hem.

Je ziet maandag een conversiedaling. De vraag: ingrijpen of niet?

Maandag: conversie 1,4% (normaal 2,0%) → paniekgevoel
Sessies maandag: 240
Orders maandag: 3,4 verwacht → 3 werkelijk
Eén order minder op 240 sessies = ruis.
Met zulke kleine aantallen springt conversie dagelijks rond.
7-daags voortschrijdend gemiddelde: 1,98% → stabiel
Conclusie: NIETS doen. Dit is ruis.

Vergelijk met een echt signaal:

Twee weken lang: conversie 1,5% (was 2,0%)
Sessies/2 weken: 3.400
Verschil consistent over 14 dagen, groot sessievolume.
Dit is signaal. Lokaliseer met de funnel:
add_to_cart-ratio stabiel, maar begin_checkout zakte van 45% naar 30%.
Oorzaak gevonden: nieuwe verzendkosten getoond in de winkelwagen.
Actie: drempel voor gratis verzending verlagen, dan opnieuw meten.

Het verschil tussen deze twee situaties is het verschil tussen een rustige ondernemer en een die elke dag aan de knoppen draait en zijn data nooit laat settelen.

  • Correlatie als causatie. “Sinds ik op TikTok post, stijgt mijn omzet” — terwijl het ook december is. Isoleer de variabele of doe een on/off-test (zie 10.3).
  • Survivorship bias. Je analyseert alleen kopers en concludeert dat je productpagina top is — maar je ziet de 98% niet die afhaakte. Kijk juist naar wie níet kocht.
  • Vanity metrics als bewijs. Meer volgers of pageviews “voelt” als groei, maar stuurt geen winst (zie 10.1).
  • Overfitting op ruis. Een A/B-test “winnaar” uitroepen na 60 bezoekers. Wacht op significantie en voldoende volume (zie 5.2).
  • Analyseverlamming. Eindeloos meer data verzamelen om een beslissing uit te stellen. Een omkeerbare beslissing met 70% zekerheid nu is beter dan een perfecte over een maand.
  • Cherry-picking. Het tijdvenster zo kiezen dat je gelijk krijgt. Spreek de periode vóór de analyse af.
  • Recency bias. De laatste dag zwaarder wegen dan de trend. Gebruik voortschrijdende gemiddelden.

Voortschrijdend gemiddelde (7-daags) = som van de waarde over 7 dagen ÷ 7. Filtert dagelijkse ruis eruit.

Vuistregel minimale steekproef voor conversie-uitspraak. Bij conversies rond 2% heb je per variant grofweg honderden conversies (niet bezoekers) nodig voor betrouwbaarheid. Onder circa 100 conversies per variant: behandel als ruis.

Relatieve verandering = (nieuw − oud) ÷ oud × 100% Voorbeeld: (1,5% − 2,0%) ÷ 2,0% = −25%. Een daling van 25% over voldoende volume is signaal, niet ruis.

Waarom is dezelfde daling van 25% de ene keer ruis en de andere keer signaal?

Het percentage zelf zegt niets; het volume eronder bepaalt alles. Conversie is een verhouding, en bij kleine aantallen springt die verhouding wild rond door puur toeval. Neem de maandag uit het voorbeeld: 240 sessies, normaal 2,0%, dus ongeveer 4,8 orders verwacht. Komt er één order minder binnen, dan staat de teller op 3 in plaats van bijna 5 en lees je 1,25% af — een schijnbare daling van bijna 40%. Niemand veranderde iets aan je winkel; het verschil is één enkele klant die net niet kocht.

Vergelijk dat met 3.400 sessies over twee weken. Bij 2,0% verwacht je 68 orders. Om naar 1,5% te zakken moeten er structureel zo’n 17 orders wegvallen, dag na dag. Zoveel toeval bestaat niet — daar zit een oorzaak achter, zoals de nieuwe verzendkosten in de winkelwagen.

De les: kijk nooit naar de procentuele verandering los van het aantal waarnemingen eronder. Een groot percentage op een handvol sessies is bijna altijd ruis, en juist die ruis verleidt je tot ingrijpen op een dag waarop er niets aan de hand was.

SituatieVolumeDuurOordeel
Conversiedipminder dan 200 sessies1 dagRuis — negeren
Conversiedipmeer dan 3.000 sessiesmeer dan 10 dagenSignaal — onderzoeken
A/B-testminder dan 100 conversies per variantkortTe vroeg — doorlaten
A/B-testmeer dan 200 conversies per variant, 95%volledigBeslisbaar
MER-dalinghele dag, alle kanalenmeer dan 3 dagenSignaal — ingrijpen
ToolFunctieWanneer kiezen
Google SheetsReview-template, voortschrijdend gemiddelde, logboekAltijd; het denkwerk gebeurt hier
Looker StudioWekelijks dashboard met periodevergelijkingVoor het visuele review-moment
A/B-testtool (significantierekenaar)Bepalen of een testverschil echt isBij elke CRO-test (zie 5.2)
Triple Whale / PolarSnelle dagelijkse MER- en alarmcheckBij meerdere kanalen en serieus budget
Notion / Sheets-logboekBeslissingen en hypotheses vastleggenAltijd; voorkomt dezelfde fout twee keer
  • Geen vaste agenda. Zonder ingeplande review-momenten kijk je impulsief en reageer je op ruis.
  • Beslissingen niet loggen. Je vergeet wat je veranderde en waarom, en kunt nooit leren of het werkte.
  • Elke dag aan de knoppen draaien. Campagnes en tests krijgen geen tijd om te settelen; je optimaliseert op toeval.
  • Wachten op perfecte data. Perfecte attributie bestaat niet (zie 10.3). Beslis op het beste beschikbare beeld.
  • Eén cijfer isoleren zonder context. Een dalende CAC is slecht nieuws als je conversie tegelijk instort. Lees cijfers in samenhang.
  • Geen drempel vooraf. Achteraf bepalen wat “goed genoeg” was, leidt tot cherry-picking.
Wekelijkse data-review (vast moment)

Datum: [datum] Periode: [week] versus [vorige week] en 4-weeks-gemiddelde

  1. Alarmcheck: draait alles? (tracking, betaling, campagnes)
  2. Stuurcijfers (noteer + pijl omhoog/omlaag):
    • Omzet: [bedrag]
    • Conversieratio: [percentage]
    • AOV: [bedrag]
    • CAC: [bedrag]
    • Blended MER: [getal]
    • Retourpercentage: [percentage]
  3. Grootste afwijking deze week: [welk cijfer, hoeveel]
  4. Signaal of ruis? [oordeel + onderbouwing]
  5. Lokalisatie via KPI-boom: [waar zit het]
  6. Beslissing: [handelen / testen / negeren]
  7. Actie + eigenaar + evaluatiedatum: […]
Experiment-logboek (één regel per experiment)

ID: [volgnummer] Datum start: [datum] Hypothese: “Als ik [verandering], dan [verwacht effect] omdat [reden].” Metriek: [welk cijfer meet succes] Drempel voor succes: [getal vooraf bepaald] Steekproef/duur nodig: [minimaal volume / aantal dagen] Status: [lopend / afgerond] Datum evaluatie: [datum] Uitkomst: [bevestigd / verworpen / onbeslist] Beslissing: [doorvoeren / terugdraaien / opnieuw testen] Geleerd: [korte les]

Case: signaal of ruis, en wat doe je?

Je verkoopt accessoires. Je standaard conversie ligt rond 2,0%. Vrijdag schrik je: het dashboard toont 1,3% voor die dag. Je had die vrijdag 180 sessies en zag 2 orders binnenkomen (verwacht bij 2,0%: ongeveer 3,6). Tegelijk loopt er sinds tien dagen een A/B-test op je productpagina: variant B staat op 2,4% conversie met 70 conversies, variant A op 2,0% met 60 conversies. Je bent geneigd om vrijdag in te grijpen en variant B meteen tot winnaar uit te roepen.

Twee vragen. (1) Is de vrijdagdip signaal of ruis, en wat doe je? (2) Mag je variant B nu al tot winnaar uitroepen?

Toon uitwerking

Vraag 1 — de vrijdagdip. Bereken het volume. Bij 2,0% en 180 sessies verwacht je 3,6 orders; je kreeg er 2. Eén of twee orders verschil op zo’n klein aantal is pure toevalsvariatie. De relatieve daling oogt fors — (1,3% − 2,0%) ÷ 2,0% is ongeveer −35% — maar dat percentage rust op een handvol orders. Check het 7-daags voortschrijdend gemiddelde; staat dat nog rond 2,0%, dan is dit ruis. Oordeel: niets doen, geen knoppen draaien.

Vraag 2 — de A/B-test. Variant B oogt beter (2,4% versus 2,0%), maar met 70 en 60 conversies per variant zit je ver onder de vuistregel van enkele honderden conversies per variant. Onder circa 100 conversies behandel je het verschil als ruis. Het is dus te vroeg: laat de test doorlopen tot beide varianten ruim boven de 200 conversies zitten en je 95% betrouwbaarheid haalt.

Les. In beide gevallen verleidt een groot ogend percentage je tot actie, terwijl het volume eronder te klein is. Wachten is hier de juiste beslissing — niet uit besluiteloosheid, maar omdat de data nog niets betekent.

Snelle kennischeck — beslissen op data

  1. Je conversie zakte gisteren van 2,0% naar 1,4% bij 200 sessies. Wat is de verstandigste reactie?

  2. Waarom is een dagelijkse review beperkt tot alarmcijfers zoals MER en omzet?

  3. Wat is het kernrisico van survivorship bias bij het analyseren van je webshop?

  4. Waarom spreek je de beslisdrempel en het tijdvenster af vóór de analyse?

Samenvatting

  • Signaal is een echte, herhaalbare verandering; ruis is toeval. Eén dag op 240 sessies is bijna altijd ruis, twee weken op 3.400 sessies is signaal — kijk nooit naar het percentage zonder het volume eronder.
  • Match de reviewfrequentie aan de volatiliteit: dagelijks alleen alarmcijfers (omzet, adspend, MER), wekelijks de stuurcijfers, maandelijks de strategische cijfers (cohorten, LTV:CAC, voorraadrotatie).
  • Stel eerst de vraag, lokaliseer met de KPI-boom, formuleer een hypothese met een vooraf afgesproken drempel en beslis dan: handelen, testen of negeren.
  • Een omkeerbare beslissing met 70% zekerheid nu verslaat een perfecte over een maand; analyseverlamming en wachten op perfecte (attributie-)data kosten je meer dan ze opleveren.
  • Leg elke beslissing en hypothese vast in een experiment-logboek en gebruik voortschrijdende gemiddelden tegen dagelijkse ruis en recency bias.