Test A/B : 39 % contre 43 % d'ouverture
Testez si un écart de 39 % à 43 % d'ouverture sur 2 000 envois par variante est significatif à 95 %.
Par Jimenez Julien, éditeur d'Atelier Bouclage · mis à jour le
- Taux de la variante A
- 39 %
- Taux de la variante B
- 43 %
- Écart (B moins A)
- +4 point(s)
- Valeur z
- 2,57
- Verdict
- écart distinct à 95 % de confiance
Test classique de comparaison de deux proportions. Un seul test ne remplace pas une répétition sur plusieurs envois.
Le cas en détail
Sur deux mille envois par variante, 780 ouvertures contre 860 donnent 39 % et 43 %. L'écart de quatre points dépasse le seuil de 1,96 : on peut parler d'un écart distinct et préférer la variante B.
À retenir : Même significatif, un écart doit être confirmé sur un autre envoi avant d'être érigé en règle.
L'exemple chiffré
Valeurs utilisées dans ce cas (des exemples, pas des mesures relevées) :
- Envois de la variante A : 2000
- Ouvertures de A : 780
- Envois de la variante B : 2000
- Ouvertures de B : 860
- Taux de la variante A
- 39 %
- Taux de la variante B
- 43 %
- Écart (B moins A)
- +4 point(s)
- Valeur z
- 2,57
- Verdict
- écart distinct à 95 % de confiance
Test classique de comparaison de deux proportions. Un seul test ne remplace pas une répétition sur plusieurs envois.
Modifiez les champs ci-dessus pour adapter le calcul à votre situation : le résultat se met à jour tout de suite.
Comment ça se calcule
On calcule les deux taux, puis le taux commun aux deux groupes. L'erreur type vaut la racine de p commun fois un moins p commun, fois la somme des inverses des effectifs. La valeur z est l'écart des taux divisé par cette erreur : au-delà de 1,96 en valeur absolue, l'écart est distinct à 95 %.
Les résultats sont fournis à titre indicatif, sans valeur de conseil juridique, fiscal ou financier. Les barèmes et taux qui changent ne sont jamais codés en dur : saisissez ceux qui s'appliquent à vous.