Test A/B avec des groupes de taille différente
Testez deux taux d'ouverture avec 3 000 envois pour A et 1 000 pour B.
Par Jimenez Julien, éditeur d'Atelier Bouclage · mis à jour le
- Taux de la variante A
- 42 %
- Taux de la variante B
- 45 %
- Écart (B moins A)
- +3 point(s)
- Valeur z
- 1,66
- Verdict
- écart compatible avec le hasard
Test classique de comparaison de deux proportions. Un seul test ne remplace pas une répétition sur plusieurs envois.
Le cas en détail
Des groupes inégaux sont possibles, par exemple quand A est la référence et B une nouveauté prudente. Le test tient compte des effectifs : le petit groupe pèse moins dans la conclusion.
À retenir : Tirez les destinataires au hasard : un groupe composé d'abonnés récents fausse la comparaison.
L'exemple chiffré
Valeurs utilisées dans ce cas (des exemples, pas des mesures relevées) :
- Envois de la variante A : 3000
- Ouvertures de A : 1260
- Envois de la variante B : 1000
- Ouvertures de B : 450
- Taux de la variante A
- 42 %
- Taux de la variante B
- 45 %
- Écart (B moins A)
- +3 point(s)
- Valeur z
- 1,66
- Verdict
- écart compatible avec le hasard
Test classique de comparaison de deux proportions. Un seul test ne remplace pas une répétition sur plusieurs envois.
Modifiez les champs ci-dessus pour adapter le calcul à votre situation : le résultat se met à jour tout de suite.
Comment ça se calcule
On calcule les deux taux, puis le taux commun aux deux groupes. L'erreur type vaut la racine de p commun fois un moins p commun, fois la somme des inverses des effectifs. La valeur z est l'écart des taux divisé par cette erreur : au-delà de 1,96 en valeur absolue, l'écart est distinct à 95 %.
Les résultats sont fournis à titre indicatif, sans valeur de conseil juridique, fiscal ou financier. Les barèmes et taux qui changent ne sont jamais codés en dur : saisissez ceux qui s'appliquent à vous.