How long should you run an A/B test?

It depends on your traffic and effect size. Most tests need 1-4 weeks. Always run at least one full week.

Can I stop my test early if I see significant results?

Stopping early inflates false positive rates. Use sequential testing for valid early stopping.

Should I run my test for full weeks?

Yes, always round up to complete weeks to capture weekday and weekend traffic patterns.

Calculateur de durée pour tests A/B

Combien de temps dois-je exécuter mon test A/B ?

Découvrez combien de temps votre test A/B doit durer pour atteindre la significativité statistique. Entrez votre trafic quotidien et les paramètres du test pour obtenir une estimation précise.

Comment utiliser ce calculateur

Entrez votre nombre moyen de visiteurs quotidiens, le pourcentage de trafic alloué au test, votre taux de conversion de base actuel et l'effet minimum détectable. Le calculateur détermine la taille d'échantillon requise et la divise par votre trafic quotidien disponible pour donner le nombre de jours nécessaires. Ajustez le pourcentage de trafic pour voir comment l'allocation de plus ou moins de trafic affecte la durée.

Comment la durée est calculée

Le calcul de la durée combine l'analyse de la taille d'échantillon avec la planification du trafic. D'abord, la taille d'échantillon requise par variante est calculée à l'aide de l'analyse de puissance. Ensuite, l'échantillon total est divisé par le trafic quotidien effectif (visiteurs quotidiens multipliés par le pourcentage de trafic, divisé par le nombre de variantes). Cela donne le nombre minimum de jours nécessaires. La bonne pratique consiste à toujours faire tourner le test pendant au moins une semaine complète pour capturer les effets liés aux jours de la semaine.

Quand utiliser ce calculateur

Utilisez ce calculateur pendant la phase de planification pour déterminer si un test est réalisable avec votre niveau de trafic. Si la durée estimée dépasse 4 à 6 semaines, envisagez d'augmenter le MDE (ne détecter que des effets plus importants), d'augmenter l'allocation de trafic ou de choisir une page à plus fort trafic pour le test. Connaître la durée à l'avance évite l'erreur classique d'arrêter les tests trop tôt.

Erreurs courantes sur la durée des tests

La plus grande erreur est d'arrêter un test avant d'atteindre la durée requise parce que les premiers résultats semblent prometteurs (ou décourageants). C'est ce qu'on appelle le peeking, et cela gonfle votre taux de faux positifs. D'autres erreurs incluent le fait de ne pas tenir compte des différences de trafic entre jours de semaine et week-ends, d'ignorer les effets saisonniers qui peuvent biaiser les résultats, et de ne pas planifier suffisamment de cycles complets.