Statistical Significance
Seuil de confiance (95%) confirmant qu'un résultat de test n'est pas dû au hasard.
La significativité statistique est le seuil de confiance indiquant que le résultat observé lors d'un test n'est probablement pas dû au hasard.
Le seuil de 95%
Le standard industrie est un niveau de confiance de 95% (p-value < 0.05). Cela signifie qu'il y a moins de 5% de chances que la différence observée soit due au hasard. Pour des décisions à fort impact, visez 99%.
Erreurs courantes
Arrêter un test trop tôt (avant d'atteindre la significativité), ne pas calculer la taille d'échantillon nécessaire avant le test, 'peeking' (regarder les résultats en cours et arrêter dès qu'ils sont favorables). Utilisez un calculateur de durée de test.
Termes associés
A/B Test
Test comparant deux versions (A et B) pour déterminer laquelle performe le mieux.
Multivariate Testing
Expérimentation testant simultanément plusieurs combinaisons de variables pour identifier la meilleure combinaison.
Confidence Level
Probabilité que le résultat observé lors d'un test soit réel et reproductible (95% = standard).
Control Group
Groupe d'utilisateurs non exposé à une modification lors d'un test, servant de référence.
Pour aller plus loin
Besoin d'aide pour optimiser votre Statistical Significance ?
Discutons de votre stratégie marketing.