Fictief voorbeeld: van 5 % naar 6 %
Twee groepen bevatten elk 1000 willekeurig toegewezen geschikte personen. Binnen hetzelfde meetvenster hebben in A 50 en in B 60 personen een gekwalificeerde conversie. De percentages zijn 5 % en 6 %: 1 procentpunt verschil of 20 % relatieve stijging.
| Fictieve maatstaf | A | B |
|---|---|---|
| Toegewezen personen | 1000 | 1000 |
| Personen met gekwalificeerde conversie | 50 | 60 |
| Conversiepercentage | 5 % | 6 % |
| Absoluut verschil tegenover A (procentpunten) | 0 | +1 |
| Relatief verschil tegenover A | 0 % | +20 % |
Bereid een interpreteerbaar resultaat voor
- Bepaal hypothese, toewijzingseenheid, hoofdmaatstaf, vereiste steekproef, horizon en stopregel. Plan een onzekerheidsmethode die past bij tussentijdse analyses en meervoudige vergelijkingen.
- Houd de noemer consistent met toewijzing. Alleen mensen selecteren die na blootstelling klikken kan vertekenen. Controleer dubbeltellingen, meetverlies en groepsverdeling.
- Wacht de geplande conversietermijn af. Een afwijkende groepsverdeling vereist onderzoek vóór interpretatie van het effect.
Beslis zonder rendement te beloven
Deze aantallen bewijzen op zichzelf geen zeker effect of hogere winstgevendheid. Onderzoek onzekerheidsintervallen, kosten, conversiekwaliteit en nadelige gevolgen. Een voor-na-vergelijking kan ook seizoenen of publieksveranderingen weerspiegelen en vervangt niet automatisch een vergelijkbare controlegroep.