Test A/B : 40 % contre 41,5 % d'ouverture
Testez si un écart de 40 % à 41,5 % sur 1 000 envois par variante est significatif à 95 %.
Par Jimenez Julien, éditeur d'Atelier Bouclage · mis à jour le
- Taux de la variante A
- 40 %
- Taux de la variante B
- 41,5 %
- Écart (B moins A)
- +1,5 point(s)
- Valeur z
- 0,68
- Verdict
- écart compatible avec le hasard
Test classique de comparaison de deux proportions. Un seul test ne remplace pas une répétition sur plusieurs envois.
Le cas en détail
Quatre cents ouvertures contre quatre cent quinze sur mille envois chacun : l'écart d'un point et demi reste dans la marge du hasard. Le verdict est prudent, et la lettre n'a pas de gagnant.
À retenir : En cas d'écart ambigu, choisissez selon un autre critère : cohérence avec votre ton, ou clic.
L'exemple chiffré
Valeurs utilisées dans ce cas (des exemples, pas des mesures relevées) :
- Envois de la variante A : 1000
- Ouvertures de A : 400
- Envois de la variante B : 1000
- Ouvertures de B : 415
- Taux de la variante A
- 40 %
- Taux de la variante B
- 41,5 %
- Écart (B moins A)
- +1,5 point(s)
- Valeur z
- 0,68
- Verdict
- écart compatible avec le hasard
Test classique de comparaison de deux proportions. Un seul test ne remplace pas une répétition sur plusieurs envois.
Modifiez les champs ci-dessus pour adapter le calcul à votre situation : le résultat se met à jour tout de suite.
Comment ça se calcule
On calcule les deux taux, puis le taux commun aux deux groupes. L'erreur type vaut la racine de p commun fois un moins p commun, fois la somme des inverses des effectifs. La valeur z est l'écart des taux divisé par cette erreur : au-delà de 1,96 en valeur absolue, l'écart est distinct à 95 %.
Les résultats sont fournis à titre indicatif, sans valeur de conseil juridique, fiscal ou financier. Les barèmes et taux qui changent ne sont jamais codés en dur : saisissez ceux qui s'appliquent à vous.