Outil gratuit

Calculer la durée d'un test A/B

Trafic, taux de conversion, effet minimum à détecter. L'outil vous dit combien de visiteurs et combien de jours il faut.

Vos chiffres

Durée minimale du test

–

Visiteurs par variante
–
Visiteurs au total
–
Conversions attendues en A
–

Et si vous visiez un autre effet ?

    Verdict : –

    Votre durée est calculée.

    Laissez votre email pour la voir. En bonus, un A/B test décortiqué par mois : hypothèse, chiffres, verdict. Rien d'autre.

    Gratuit. Désinscription en 1 clic.

    Ce calcul vous dit combien de visiteurs et combien de jours il faut pour qu'un test donne une réponse fiable. Pour calculer la durée d'un test A/B, l'outil croise votre trafic quotidien, votre taux de conversion, le MDE visé et le niveau d'exigence statistique. Vous savez avant le lancement si le test peut aboutir.

    À quoi sert ce calcul

    Il sert à ne pas lancer un test perdu d'avance. Sans ce calcul, on arrête trop tôt ou on laisse tourner des mois un test qui ne pourra jamais conclure. Je le fais avant chaque test, juste après avoir écrit l'hypothèse.

    Comment remplir l'outil

    • Visiteurs par jour : le trafic de la page testée, pas du site entier.
    • Taux de conversion : celui du KPI principal sur cette page.
    • MDE : la plus petite hausse relative que vous voulez détecter.
    • Confiance et puissance : 95 % et 80 % par défaut, les réglages les plus courants.
    • Nombre de versions : original compris.

    Le MDE (minimum detectable effect) est le réglage qui change tout. Plus il est petit, plus il faut de visiteurs.

    Comment lire le résultat

    L'outil donne le nombre de visiteurs par variante et la durée en jours. Mes règles :

    • 2 à 4 semaines : la durée que je vise.
    • Au moins 2 cycles d'achat : pour couvrir l'écart entre semaine et week-end et les visiteurs qui reviennent avant d'acheter.
    • Plus de 8 semaines : je ne teste pas. Je déploie l'optimisation directement et je suis son effet pendant 3 mois.

    Si la durée est trop longue, visez un changement plus marqué, testez une page plus fréquentée ou réduisez le nombre de variantes.

    La formule expliquée simplement

    Visiteurs par variante ≈ (1,96 + 0,84)² × [p1 × (1 - p1) + p2 × (1 - p2)] ÷ (p2 - p1)² (valeurs arrondies : l'outil utilise les quantiles exacts)

    p1 est votre taux actuel, p2 le taux visé. 1,96 correspond à 95 % de confiance, 0,84 à 80 % de puissance. Le dénominateur explique tout : diviser l'écart par deux multiplie environ par quatre le nombre de visiteurs.

    Durée en jours = visiteurs par variante × nombre de versions ÷ visiteurs par jour, arrondie au jour supérieur.

    Exemple

    2 000 visiteurs par jour, 3 % de conversion, MDE de +10 % (de 3 % à 3,3 %), 95 % de confiance, 80 % de puissance, deux versions. Il faut 53 210 visiteurs par variante, soit 54 jours.

    MDE visé Visiteurs par variante Durée
    +10 % 53 210 54 jours
    +15 % 24 193 25 jours
    +20 % 13 914 14 jours

    À 54 jours, le test passe sous la limite des 8 semaines, mais reste loin des 2 à 4 semaines visées. Avec un MDE de +15 %, il tombe à 25 jours.

    Questions fréquentes

    Comment calculer la durée d'un test A/B ?

    Calculez d'abord le nombre de visiteurs nécessaires par variante à partir du taux de conversion, du MDE, de la confiance et de la puissance. Multipliez par le nombre de versions, puis divisez par le trafic quotidien de la page. Visez 2 à 4 semaines et au moins 2 cycles d'achat.

    Qu'est-ce que le MDE dans un A/B test ?

    Le MDE, ou minimum detectable effect, est la plus petite hausse que le test saura distinguer du hasard. À 3 % de conversion, un MDE de +10 % revient à détecter un passage à 3,3 %. Plus le MDE est petit, plus le test demande de visiteurs et de temps.

    Que faire si le test doit durer plus de 8 semaines ?

    Ne pas le lancer. Sur une telle durée, la saisonnalité, les campagnes et les cookies effacés brouillent le résultat. Je déploie alors le changement directement et je suis son effet sur 3 mois, en comparant aux KPI définis dans l'hypothèse.

    Pourquoi garder 80 % de puissance ?

    La puissance est la probabilité de détecter l'effet s'il existe vraiment. À 80 %, un vrai gain égal au MDE passe inaperçu une fois sur cinq. Monter à 90 % réduit ce risque, mais demande environ un tiers de visiteurs en plus. Je garde 80 % par défaut, le réglage le plus courant, pour des durées tenables.

    Avant ce calcul, écrivez votre hypothèse. Pendant le test, vérifiez la répartition du trafic. La séquence complète est dans le guide calculateur A/B test.

    Outils CRO gratuits

    Les autres outils.

    Votre email débloque déjà tous les outils de la boîte.

    Voir tous les outils CRO →