Test d'objets sur une liste de 20 000 abonnés
Calculez l'échantillon d'un test A/B sur 20 000 abonnés avec 10 % par variante et 40 % d'ouverture attendue.
Par Jimenez Julien, éditeur d'Atelier Bouclage · mis à jour le
- Destinataires par variante
- 2 000
- Reste pour l'envoi gagnant
- 16 000
- Ouvertures attendues par variante
- 800
- Marge d'erreur à 95 %
- ± 2,15 point(s)
Un écart entre deux variantes plus petit que cette marge ne permet pas de conclure.
Le cas en détail
Dix pour cent de vingt mille abonnés font deux mille destinataires par variante, et seize mille pour l'envoi gagnant. À 40 % d'ouverture, la marge d'erreur est d'environ deux points, ce qui limite la lecture des petits écarts.
À retenir : Un écart inférieur à la marge d'erreur ne prouve rien : attendez-vous à ne départager que les gros écarts.
L'exemple chiffré
Valeurs utilisées dans ce cas (des exemples, pas des mesures relevées) :
- Taille de la liste : 20000
- Part testée par variante (%) : 10
- Taux d'ouverture attendu (%) : 40
- Destinataires par variante
- 2 000
- Reste pour l'envoi gagnant
- 16 000
- Ouvertures attendues par variante
- 800
- Marge d'erreur à 95 %
- ± 2,15 point(s)
Un écart entre deux variantes plus petit que cette marge ne permet pas de conclure.
Modifiez les champs ci-dessus pour adapter le calcul à votre situation : le résultat se met à jour tout de suite.
Comment ça se calcule
Chaque groupe contient la part choisie de la liste, arrondie à l'entier inférieur. La marge d'erreur à 95 % vaut 1,96 fois la racine de p fois un moins p, divisé par l'effectif, où p est le taux d'ouverture attendu.
Les résultats sont fournis à titre indicatif, sans valeur de conseil juridique, fiscal ou financier. Les barèmes et taux qui changent ne sont jamais codés en dur : saisissez ceux qui s'appliquent à vous.