Que signifie la significativité statistique ? L'apport de la taille d'effet et de la puissance statistique
Résumé
Les notions statistiques d’analyse de puissance et de taille d’effet sont encore très peu utilisées dans les sciences du sport, malgré leur pertinence et leur intérêt. Cet exposé illustre, au travers de deux études distinctes, les nombreux avantages qui peuvent être retirés de leur emploi. Le recours à ces deux notions vise d’une part à mettre en lumière les apports de certaines études se heurtant à un manque de significativité statistique (souvent lié à de petits échantillons, ce qui est le cas du premier exemple présenté) et pour lesquelles il est difficile, malgré leur intérêt réel, de pouvoir défendre les « conclusions ». La détermination de la taille d’effet, en particulier, met en avant l’importance concrète des effets mesurés, témoignant de leur éventuelle significativité scientifique, au-delà de leur simple (non-) significativité statistique. Ces deux notions, taille d’effet et analyse de puissance, permettent d’autre part de pouvoir relativiser certains résultats, pourtant statistiquement significatifs (souvent dus à la taille importante de l’échantillon, comme dans le deuxième exemple), mais dont le pouvoir explicatif s’avère limité. En amont de toute recherche, ces deux notions peuvent également contribuer à la planification des protocoles d’études, permettant ainsi de déterminer au préalable les tailles d’échantillons qui seraient nécessaires. Enfin, la taille d’effet peut servir de mesure de référence pour mener des comparaisons entre différentes études (favorisant ainsi les méta-analyses).
Mots-clés
- taille d’effet
- analyse de puissance
- test statistique
- significativité statistique
- planification expérimentale