TF

Rekenmachines

A/B-test-significantiecalculator

Controleer of je A/B-testresultaat statistisch significant is en plan hoeveel bezoekers een test nodig heeft.

A · Controle

Conversieratio: 5,00%

B · Variant

Conversieratio: 5,70%

Significant bij 95% betrouwbaarheid: B verslaat A.
Relatieve stijging
+14,00%
p-waarde
0,0278
z-score
2,2
Bereikte betrouwbaarheid
97,2%

95%-betrouwbaarheidsinterval voor het absolute verschil in conversieratio (B − A): +0,08% tot +1,32%.

Wat is deze tool?

Heeft variant B echt gewonnen, of is het verschil toeval? Voer bezoekers en conversies per versie in voor de conversieratio’s, de relatieve stijging, de p-waarde en een duidelijk oordeel bij het gekozen betrouwbaarheidsniveau. Plan je een test? De steekproefcalculator vertelt hoeveel bezoekers en dagen je nodig hebt.

De significantie gebruikt een z-toets voor twee proporties met gepoolde standaardfout, de standaardmethode om conversieratio’s te vergelijken. Een resultaat is significant als de p-waarde onder 1 − betrouwbaarheid ligt, bijvoorbeeld onder 0,05 bij 95%.

Steekproefgroottes gebruiken de normale benadering voor twee proporties bij het gekozen onderscheidend vermogen (standaard 80%). Bepaal de grootte vooraf en stop niet zodra iets significant lijkt — tussentijds kijken verhoogt het aantal valse positieven.

Zo gebruik je: A/B-testcalculator

  1. Voer het aantal bezoekers en conversies in voor A (controle) en B (variant).
  2. Kies een betrouwbaarheidsniveau (95% is standaard) en een tweezijdige of eenzijdige test.
  3. Lees het oordeel, de stijging, de p-waarde en het betrouwbaarheidsinterval van het verschil.
  4. Open vóór een test Steekproefgrootte: voer de basisratio, de kleinste stijging die het detecteren waard is en het dagelijkse verkeer in om de duur te schatten.

Voorbeelden

Een significante winst

A: 10,000 visitors, 500 conversions
B: 10,000 visitors, 600 conversions
Uplift +20% · p ≈ 0.002 · significant at 95%

Veelgestelde vragen

Welk betrouwbaarheidsniveau moet ik gebruiken?

95% is de gebruikelijke standaard. Gebruik 99% als een verkeerde beslissing duur zou zijn, of 90% voor snelle experimenten met weinig risico.

Eenzijdig of tweezijdig?

Tweezijdige tests herkennen verschillen in beide richtingen en zijn de veiligste keuze. Eenzijdige tests vragen alleen of B beter is, hebben minder bezoekers nodig, maar vertellen niet of B slechter is.

Wat is het minimaal detecteerbare effect?

De kleinste relatieve verbetering die je wilt kunnen zien. Kleinere effecten vragen veel meer bezoekers: het effect halveren verviervoudigt ongeveer de steekproef.

Mijn test is niet significant. Wat nu?

Het verschil is te klein om ertoe te doen, of je hebt meer data nodig. Gebruik de steekproefcalculator om te zien hoeveel bezoekers het verwachte effect vraagt.

Later meer mogelijkheden nodig?

Premiumtools, hogere limieten en API-toegang staan op de planning. V1 blijft gratis en privé in je browser.