Introduction au calcul de la taille d’effet globale d’une intervention dans les méta-analyses en sciences de l’éducation Introduction to calculating the overall effect size of an intervention in meta-analyses in educational sciences Introdução ao cálculo do tamanho do efeito global de uma intervenção em meta-análises nas ciências da educação

Résumé

Quand plusieurs études par comparaison de groupes (intervention et témoin) portent sur une même intervention en milieu scolaire, la synthèse de leurs résultats permet d’évaluer l’effet de cette intervention et de répondre aux attentes des praticiens, mais aussi d’orienter les recherches futures. C’est dans ce but que sont réalisées des synthèses quantitatives ou encore des méta-analyses. Pour chacune des études sélectionnées, une taille d’effet est calculée, qui est le g de Hedges (différence standardisée des moyennes des deux groupes) quand la variable à expliquer est un score post-test. La taille d’effet globale est alors estimée en suivant dans la plupart des cas le modèle des effets aléatoires. Enfin, pour conclure quant à l’intérêt de l’intervention, les tailles d’effet sont traduites en nombre de mois de progrès. Un exemple numérique est proposé pour faciliter la compréhension des modèles analytiques mis en oeuvre dans une méta-analyse pour les cas les plus simples.

Mots-clés :

• effet fixe,
• effets aléatoires,
• évaluation,
• intervention,
• méta-analyse,
• taille d’effet

Abstract

When several comparison group studies relate to the same intervention in the school environment, the synthesis of their results makes it possible to evaluate the effect of this intervention and to meet the expectations of practitioners, but also to guide the future research. It is for this purpose that quantitative summaries or meta-analyses are carried out. For each of the selected studies, an effect size is calculated; when the variable to be explained is a posttest score, we use Hedges’ g (standardized difference of the means of the two groups). The overall effect size is then estimated by following in most cases the random effects model. Finally, to determine the interest of the intervention, the results of the meta-analysis are interpreted according to several grids. A worked example is provided to help the understanding of the analytical models implemented in a meta-analysis in simple cases.

Keywords:

• effect size,
• evaluation,
• fixed effect,
• intervention,
• meta-analysis,
• random effects

Resumo

Quando vários estudos por comparação de grupos (intervenção e controlo) se referem à mesma intervenção em ambiente escolar, a síntese dos seus resultados permite avaliar o efeito desta intervenção e ir ao encontro das expectativas dos práticos, mas também orientar futuras investigações. É para esse fim que são realizados resumos quantitativos ou meta-análises. Para cada um dos estudos selecionados é calculado um tamanho de efeito, que é o g de Hedges (diferença padronizada entre as médias dos dois grupos) quando a variável a ser explicada é uma pontuação pós-teste. O tamanho do efeito global é então estimado seguindo, na maioria dos casos, o modelo de efeitos aleatórios. Finalmente, para concluir sobre o interesse da intervenção, os tamanhos dos efeitos são traduzidos no número de meses de progresso. Um exemplo numérico é proposto para facilitar a compreensão dos modelos analíticos implementados numa meta-análise para os casos mais simples.

Palavras chaves:

• avaliação,
• efeito fixo,
• efeitos aleatórios,
• intervenção,
• meta-análise,
• tamanho do efeito