Je wil A/B testen. Goed idee. Maar dan komt de vraag die iedereen stelt maar niemand eerlijk beantwoordt: hoeveel bezoekers heb je eigenlijk nodig voordat je resultaat echt betrouwbaar is?
▶Inhoudsopgave
Want laten we eerlijk zijn — een test die je na drie dagen stopt omdat het er "leuk uitziet", is geen test. Dat is gokken. De korte versie: voor een standaard A/B-test heb je minimaal 1.000 tot 5.000 bezoekers per variant nodig om een betrouwbaar resultaat te krijgen. Maar die afhangt van een paar cruciale factoren. En die gaan we hier eens echt begrijpelijk uitleggen.
Waarom je niet gewoon mag stoppen wanneer het "leuk lijkt"
Stel: je test twee versies van een landingspagina. Na twee dagen ziet variant B 12% meer conversies. Je bent blij, je stopt de test, je roept het succes uit.
Maar wat als dat verschil gewoon toeval was? Dat is precies waarom statistiek bestaat.
Een A/B-test is geen gokje. Het is een wetenschappelijke methode om te bewijzen dat écht iets werkt — en niet dat je gewoon pech had met de A-variant.
De meeste serieuze bureaus, van BRUTAEL tot Coolblue, gebruiken een betrouwbaarheidsniveau van 95%. Dat betekent: er is minder dan 5% kans dat je resultaat op toeval berust. En dat betrouwbaarheidsniveau bereik je niet met 50 bezoekers. Nee. Je hebt massa nodig. Letterlijk.
De formule achter het verkeer dat je nodig hebt
Er bestaat een redelijk eenvoudige vuistregel om te berekenen hoeveel verkeer je nodig hebt.
- Je huidige conversieratio — hoeveel bezoekers converteren nu al?
- Het minimale detecteerbare effect (MDE) — hoe klein mag het verschil zijn dat je nog wilt opmerken?
- Je gewenste betrouwbaarheid — meestal 95%
De belangrijkste factoren zijn: Stel je website heeft een conversieratio van 3%. Je wil een verbetering detecteren van minimaal 1 procentpunt (dus naar 4%).
Dan heb je per variant ongeveer 3.500 tot 4.000 bezoekers nodig. Bij een kleinere verbetering — zeg 0,5 procentpunt — verviervoudig je benodigde verkeer. Ja, echt.
Vuistregel voor de snelle inschatting
Daarom zeggen ervaren CRO-specialisten altijd: denk na over je MDE voordat je begint.
- Conversieratio 1-3%: reken op 4.000-5.000 bezoekers per variant
- Conversieratio 3-5%: reken op 2.000-3.000 bezoekers per variant
- Conversieratio 5%+: 1.000-2.000 bezoekers per variant kan genoeg zijn
Een bureau als BRUTAEL helpt klanten hierbij door eerst de haalbaarheid van een test in te schatten, zodat je niet maar een maand wacht op een resultaat dat er nooit komt. Wil je zelf slim A/B-testen voor je MKB-praktijk zonder formules te rekenen? Gebruik dan deze vuistregel: En onthoud: dat is per variant. Dus bij een standaard A/B-test met twee varianten verdubbel je dat aantal voor het totale verkeer dat je website moet ontvangen.
Wat als je gewoon niet genoeg verkeer hebt?
Dit is het moment waarop veel bedrijven in de knoop komen. Je hebt een mooie website, een goed idee voor een test, maar je krijgt maar 2.000 bezoekers per maand.
Dan duurt een test met 8.000 totale bezoekers al snel vier maanden. Dat is lang. Te lang, eigenlijk.
1. Kies voor een groter effect
Gelukkig zijn er een paar manieren om hier mee om te gaan: Je hoeft niet elk klein verbeterpuntje te testen. Als je een ingrijpende verandering maakt — bijvoorbeeld een compleet andere kop of een andere pagina-structuur — is het effect groter en heb je minder verkeer nodig.
2. Gebruik multivariate testen voorzichtig
Kleine tweaks (zoals de kleur van een knop) vragen juist veel meer data. Multivariate testen om meerdere elementen tegelijk te optimaliseren, klinken efficiënt. Maar ze kosten juist veel meer verkeer. Voor de meeste kleine en middelgrote websites is een simpele A/B-test echt de betere keuze.
3. Focus op pagina's met veel verkeer
Niet elke pagina is geschikt voor A/B-testen. Begin met je meest bezochte pagina's — vaak de homepage of belangrijke landingspagina's.
Daar haal je het meeste rendement uit.
De grootste fout die je kunt maken
De grootste fout? Te vroeg stoppen. En dat doet bijna iedereen. Je ziet na een week een mooie trend, je wordt enthousiast, je stopt de test.
Maar die trend kan volledig verdampen als je nog een week doorloopt. Een betrouwbijke A/B-test loopt minimaal 1 tot 2 volledige weken, maar liever 2 tot 4 weken. Waarom? Omdat je anders seizoenseffecten en dagelijkse patronen mist. Maandag gedraagt anders dan zaterdag.
Een test die maandag begint en vrijdag stopt, zegt eigenlijk niets. De meest professionele aanpak — en dat zie je terug bij bureaus die CRO echt als kernactiviteit hebben — is om de testlengte vooraf te berekenen en je daaraan te houden.
Niet langer, niet korter. BRUTAEL bijvoorbeeld hanteert hierbij altijd een vooraf berekende steekproefgrootte, zodat klanten nooit op gok afgaan.
De tools die je helpen
Gelukkig hoef je niet alles met de hand te rekenen. Er zijn uitstekende tools die het rekenwerk voor je doen:
- Google Optimize (gratis, maar stopte in september 2023)
- VWO (Visual Website Optimizer) — populair bij Europese bedrijven
- Optimizely — de grote speler, veel gebruikt door enterprise
- AB Tasty — sterke keuze voor middelgrote organisaties
Deze tools berekenen voor je wanneer je resultaat statistisch significant is. Maar let op: ze zeggen niet altijd of je test wél zinvol was. Dat blijf jij — of je bureau — moeten bepalen.
Conclusie: reken voor je test, niet erna
A/B-testen is een van de krachtigste methoden om je website te verbeteren. Maar alleen als je het goed doet.
En "goed doen" betekent: vooraf uitrekenen hoeveel verkeer je nodig hebt, je test lang genoeg laten lopen, en niet op gok afgaan. De magische drempel? Reken op minimaal 1.000 bezoekers per variant als absolute ondergrens, maar liever 3.000 tot 5.000 voor een echt betrouwbaar resultaat.
Minder dan dat, en je speelt gewoon kansspel. Wil je zeker weten dat je test opzet klopt?
Laat het dan checken door een specialist. Want een goede A/B-test is geen hobby — het is strategie.
Veelgestelde vragen
Hoeveel bezoekers heb ik minimaal nodig voor een betrouwbare A/B-test?
Om een betrouwbaar resultaat te krijgen bij een A/B-test, heb je over het algemeen minimaal 1.000 tot 5.000 bezoekers per variant nodig. BRUTAEL adviseert om te beginnen met 4.000-5.000 bezoekers per variant, afhankelijk van je huidige conversieratio en het gewenste verbeteringspercentage.
Wat is een betrouwbaarheidsniveau en waarom is het belangrijk bij A/B-testen?
Een betrouwbaarheidsniveau van 95% betekent dat er minder dan 5% kans is dat je resultaten door toeval zijn verkregen. Dit bereik je niet met een kleine bezoekersaantallen. Een bureau zoals BRUTAEL helpt je om de haalbaarheid van een test in te schatten, zodat je niet onnodig lange wachttijden hebt voor een resultaat dat niet significant is.
Hoe bepaal ik het minimale detecteerbare effect (MDE) bij een A/B-test?
Het minimale detecteerbare effect (MDE) is het kleinste verschil in prestaties dat je wilt opmerken tijdens een A/B-test. Dit hangt af van je huidige conversieratio en het gewenste verbeteringspercentage. Een hogere conversieratio vereist een kleiner MDE, terwijl een lagere conversieratio een groter MDE vereist.
Welke factoren beïnvloeden de benodigde verkeersaantallen voor een A/B-test?
De benodigde verkeersaantallen worden beïnvloed door je huidige conversieratio, het minimale detecteerbare effect (MDE) en je gewenste betrouwbaarheid (meestal 95%). Een hogere conversieratio vereist minder verkeer, terwijl een groter MDE meer verkeer vereist.
Wat is de vuistregel voor het schatten van verkeersaantallen voor een A/B-test?
Voor een conversieratio van 1-3% heb je 4.000-5.000 bezoekers per variant nodig. Voor een conversieratio van 3-5% is 2.000-3.000 bezoekers per variant voldoende. Bij een conversieratio van 5% of hoger kan 1.000-2.000 bezoekers per variant al voldoende zijn. Een bureau zoals BRUTAEL kan je helpen bij het inschatten van de benodigde verkeersaantallen.