Wat is A/B-testen en hoe werkt het?
Bij A/B-testen toon je twee versies van dezelfde pagina aan verschillende bezoekers. Daarna kijk je welke versie meer oplevert.
De helft ziet versie A, de andere helft versie B. Verder verandert er niets: zelfde adres, zelfde moment, zelfde soort bezoekers.
Daardoor weet je aan het eind niet wat je dénkt dat werkt, maar wat er werkelijk gebeurt.

Hoe het werkt
Je maakt een tweede versie van een pagina waarin je precies één ding verandert. Een andere kop bijvoorbeeld, of een andere knoptekst.
Een testprogramma verdeelt je bezoekers daarna willekeurig over de twee versies en houdt bij hoeveel er in elke groep doen wat jij wilt: een formulier invullen, bellen of bestellen.
Waarom je verkeer moet splitsen
Je zou ook een week versie A kunnen tonen en de week erna versie B. Toch is dat onbetrouwbaar, want tussen die twee weken kan van alles verschillen.
Een feestdag, een nieuwsbericht, een advertentie die aanslaat. Door tegelijk te tonen haal je die ruis eruit.
Wat je ermee wint
Zekerheid over kleine keuzes die je anders eindeloos bespreekt. Welke kop, welke knop, welke volgorde.
En vaak ook een verrassing. De versie waarvan iedereen zeker weet dat hij wint, verliest regelmatig. Meer over waar je dan op stuurt lees je bij conversie.
Mijn vuistregels
- Verander één ding tegelijk, anders weet je achteraf niet wat het deed.
- Bedenk vooraf wat je verwacht en waarom; dat dwingt je tot nadenken.
- Meet op wat je echt wilt, dus aanvragen en niet klikken.
- Laat de test uitlopen, ook als het er na twee dagen mooi uitziet.
Die laatste is de moeilijkste. Vroeg stoppen is precies hoe je jezelf een winnaar aanpraat die er geen is.
Het verschil met multivariate testen
Bij een A/B-test vergelijk je twee complete versies. Bij een multivariate test wissel je meerdere onderdelen tegelijk en kijk je welke combinatie wint.
Dat laatste klinkt efficiënter, maar het vraagt veel meer bezoekers, want elke combinatie moet apart genoeg gegevens opleveren. Meer daarover lees je bij hoeveel bezoekers heb je nodig voor een A/B-test.
Wanneer het niet kan
Bij te weinig verkeer. Krijgt een pagina een paar honderd bezoekers per maand, dan duurt een betrouwbare test maanden en is hij achterhaald voordat hij af is.
Dan kun je beter kijken waar mensen afhaken en dat oplossen. Meer daarover lees je bij cro.