Abstracts
Résumé
De nombreuses discussions, parfois vives, parfois critiques, ont eu lieu sur l’utilisation des statistiques depuis le début du nouveau millénaire. Ce court texte d’opinion a comme objectif de puiser à ces critiques pour faire ressortir dix bonnes façons de s’atteler à la tâche d’analyser des données. Nous vous offrons ainsi notre propre version des dix commandements. Nous espérons ultimement qu’ils encourageront la communauté scientifique à réfléchir à ses pratiques d’analyses quantitatives et à les améliorer.
Abstract
Many discussions, sometimes heated, sometimes critical, were held on the use of statistics since the beginning of the new millennium. The aim of this opinion piece is to tap these criticisms in order to highlight ten ways to analyze a data set. We thus offer our own version of the Ten Commandments. We ultimately hope this will encourage the scientific community to improve its quantitative analysis practices.
Download the article in PDF to read it.
Download
Appendices
Notes biographiques
Sébastien Béland est professeur adjoint au département d’administration et fondements de l’éducation, à l’Université de Montréal. Ses intérêts de recherche suivent deux axes : la mesure dans le domaine de l’éducation et l’évaluation des apprentissages dans les programmes d’études en art, au niveau postsecondaires.
Denis Cousineau est professeur de l’Université d’Ottawa à l’école de psychologie et fondateur de la revue The Quantitative Methods for Psychology (www.tqmp.org). Ses recherches portent sur les modèles de temps de réponse, l’attention visuelle et la recherche visuelle. Il travaille aussi en mathématique sur l’estimation de paramètres pour les distributions de Weibull et de Pareto.
Nathalie Loye est professeure agrégée au département d’administration et fondements de l’éducation, à l’Université de Montréal. Ses intérêts de recherche portent sur les modèles de mesure appliqués à des données issues de tests ou de questionnaires dans les domaines de l’éducation et de la santé. Elle s’intéresse particulièrement à la validité des données et des instruments.
Bibliographie
- Baguley, T. (2009). Standardized or simple effect size: What should be reported? British Journal of Psychology, 100, 603-617.
- Bédard, P. O. (2013) La mobilisation des savoirs scientifiques par les analystes de politiques québécois : analyse de cheminement contrefactuelle et essai épistémologique d’interprétation causale (Thèse de doctorat). Université Laval, Québec, QC.
- Borsboom, D. (2006). The attack of the psychometricians. Psychometrika, 71, 425-440. doi:10.1007/s11336-006-1447-6
- Chanquoy, L., Tricot, A. et Sweller, J. (2007). La charge cognitive : théorie et applications. Paris, France : Armand Collin.
- Cohen, J. (1977). Statistical power analysis for the behavioral sciences. New York, NY : Academic Press.
- Cohen, J. (1994). The earth is round (p< .05). American Psychologist, 49, 997-1003. doi: 10.1037/0003-066X.49.12.997
- Cortina, J. M. (1993). What is coefficient alpha? An examination of theory and applications. Journal of Applied Psychology, 78, 98-104.
- Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16, 297-334.
- Cumming, G. (2009, 3 mars). Dance of the p values [vidéo en ligne]. Repéré à https://www.youtube.com/watch?feature=player_embedded&v=ez4DgdurRPg
- Cumming, G. (2014) The new statistics: Why and how, Psychological Science, 25, 7-29. doi: 10.1177/0956797613504966
- Cumming, G. et Fidler, F. (2009) Confidence intervals: Better answers to better questions, Journal of Psychology, 217, 15-26. doi: 10.1027/0044-3409.217.1.15
- Dalgaard, P. (2007) New functions for multivariate analysis. R News, 7, 2-7. Repéré à http://www.r-project.org/doc/Rnews/Rnews_2007-2.pdf
- Dunn, T. J., Baguley, T. et Brunsden, V. (2014). From alpha to omega: A practical solution to the pervasive problem of internal consistency estimation. British Journal of Psychology, 105, 399-412.
- Giguère, G., Hélie, S. et Cousineau, D. (2004). Manifeste pour le retour des sciences en psychologie. Revue québécoise de psychologie, 25, 117-130.
- Henson, R. K., Hull, D. M. et Williams, C. S. (2010). Methodology in our education research culture: Toward a stronger collective quantitative proficiency. Educational Researcher, 39, 229-240. doi:10.3102/0013189X10365102
- Hunt, E. (2013). Calls for replicability must go beyond motherhood and apple pie. European Journal of Personality, 27,126-127.
- Laveault, D. (2012). Soixante ans de bons et mauvais usages du alpha de Cronbach. Mesure et évaluation en éducation, 35(2012), 1-7.
- Lecoutre, B. (1991). A correction for the epsilon_tilde approximate test in repeated measures designs with two or more independent groups. Journal of Educational Statistics, 16, 371-372. doi: 10.3102/10769986016004371
- Marmolejo-Ramos, F. et Cousineau, D. (sous presse). Perspectives on the use of null hypothesis statistical testing (Part II): Is null hypothesis statistical testing an irregular bulk of masonry? Educational and Psychological Measurements.
- McDonald, R. P. (1999). Test theory: A unified treatment. Mahwah, NJ : Lawrence Erlbaum.
- Revelle, W. et Zinbarg, R. E. (2009). Coefficients alpha, beta, omega, and the glb: Comments on Sijtsma. Psychometrika, 74, 145-154. doi:10.1007/s11336-008-9102-z
- Saul, J. (2006). Mort de la globalisation. Paris, France : Payot.
- Sharpe, D. (2013). Why the resistance to statistical innovations? Bridging the communication gap. Psychological Methods, 18, 572-582.
- Sijtsma, K. (2009). On the use, the misuse, and the very limited usefulness of Cronbach’s alpha. Psychometrika, 74, 107-120. doi:10.1007/s11336-008-9101-0.
- Sijtsma, K. (2015). Playing with data- or how to discourage questionable research practices and stimulate researchers to do things right. Psychometrika, 81, 1-15.
- Simon, H. A. (1956). Rational choice and the structure of the environment. Psychological Review, 63, 129-138. doi:10.1037/h0042769
- Simpson, E. (1951). The interpretation of interaction in contingency tables. Journal of the Royal Statistical Society. Series B (Methodological), 13(2), 238-241.
- Stiglitz, J. (2003). Quand le capitalisme perd la tête. Paris, France : Payot.
- Trafimow, D. et Marks, M. (2015). Editorial. Basic and Applied Social Psychology, 37, 1-2. doi: 10.1080/01973533.2015.1012991
- Tufte, E. (1983). The visual display of quantitative information. Cheshire, CT : Graphics Press
- Tukey, J. W. (1977). Exploratory data analysis. Reading, PA : Addison-Wesley.
- Tversky, A. et Kahneman, D. (1974). Judgment under uncertainty: Heuristics and biases. Science, 185, 1124-1131.
- Tversky, A. et Kahneman, D. (1979). Prospect theory: An analysis of decision under risk. Econometrica, 47, 263-292.
- Wagenmakers, E.-J. (2007). A practical solution to the pervasive problems of p values. Psychonomic Bulletin & Review, 14, 779-804. doi: 10.3758/BF03194105
- Wasserstein, R. L. et Lazar, N. A. (2016). ASA’s statement on statistical significance and p-values. The American Statistician. doi: 10.1080/00031305.2016. 1154108
- Watier, N., Lamontagne, C. et Chartier, S. (2011). What does the mean mean? Journal of Statistics Education, 19, 1-20. Repéré à http://www.amstat.org/publications/jse/v19n2/watier.pdf
- Wickham, H. (2010). A layered grammar of graphics. Journal of Computational and Graphical Statistics, 19, 3-28.
- Wilkinson, L. (2005). The grammar of graphics (2e éd). New York, NY : Springer.
10.7202/1024716arAppendices
Biographical notes
Sébastien Béland is adjunct professor in the département d’administration et fondements de l’éducation at the Université de Montréal. His research interest focuses on two main axes: measurement in the field of education and postsecondary learning assessment in arts.
Denis Cousineau is professor at the Université d’Ottawa School of psychology and founder of The Quantitative Methods for Psychology (www.tqmp.org). His areas of research include response time models, attention, and visual search. He also worked in mathematics on parameter estimation for the Weibull and the Pareto distributions.
NATHALIE LOYE is associate professor in the département d’administration et fondements de l’éducation at the Université de Montréal. Her research interests include measurement models applied to data from questionnaires or tests in the fields of education and health. She is particularly interested in the validity of data and instruments.