Évaluation de la qualité de l’enseignement par les étudiantes et étudiants Qualités psychométriques et comparaison des conditions de passation

Résumé

Les évaluations de l’enseignement par les étudiants et étudiantes sont utilisées à des fins académiques et formatives, mais sont également évoquées d’une manière sommative lors de décisions liées à la carrière professorale. Dans le cadre de la présente recherche, deux objectifs sont poursuivis. Le premier objectif est de déterminer les qualités psychométriques de l’instrument utilisé à l’Université du Québec à Rimouski. Avec l’avènement des technologies de l’information et de la communication, les conditions dans lesquelles se déroulent ces évaluations ont été modifiées. Le second objectif est de vérifier les impacts de la modalité de passation en ligne vs papier sur les qualités psychométriques de l’instrument. Le corpus de données est constitué des évaluations réalisées durant les années 2007- 2008 (20245 évaluations) et 2010-2011 (16432 évaluations). Les résultats attestent qu’un modèle hiérarchique décrit mieux la structuration du questionnaire que des modèles alternatifs, que la modalité de passation a une influence sur le taux de réponses et, dans certains cas, sur le taux de satisfaction des enseignements, mais qu’elle n’influence ni la fiabilité ni la dimensionnalité des évaluations. Les implications de ces résultats sont discutées.

Mots-clés :

• évaluation de l’enseignement,
• modalités,
• en ligne vs papier,
• validité

Abstract

Students’ evaluations of teaching effectiveness are used for academic and formative purposes, but are also sometimes evoked, in a summative way, for some faculty career decisions. In the present study, two main objectives are pursued. The first objective is to determine the psychometric properties of the instrument in use at the Université du Québec à Rimouski. With the advent of information and communication technologies, the conditions in which the evaluations take place have been changed from paper to online processes. so, the second objective is to verify the impacts of these online vs paper processes on the psychometric properties of the instrument. The data originated from the evaluations gathered during the 2007-2008 (20,245 evaluations) and 2010-2011 (16,432 evaluations) academic years. The results attest that a hierarchical model better describes the data than alternative models, that online vs paper processes have an influence on response rates and, in some cases, on the satisfaction level with teaching, but they have no impact on the fiability and the dimensionnality of the evaluations. The implications of these results are discussed.

Keywords:

• students’evaluations of teaching effectiveness,
• online vs paper processes,
• validity

Resumo

As avaliações do ensino pelos estudantes são utilizadas para fins académicos e formativos,mas igualmente evocados de uma maneira sumativa no momento dasdecisões ligadas à carreira docente. No quadro da presente investigação, são seguidosdois objetivos. O primeiro objetivo é determinar as qualidades psicométricasdo instrumento utilizado na Universidade do Quebeque em Rimouski. Com oadvento das tecnologias da informação e da comunicação, as condições nas quaisse desenvolvem estas avaliações foram modificadas. O segundo objetivo é verificaros impactos da modalidade de administração online vs. papel sobre as qualidadespsicométricas do instrumento. O corpo de dados é constituído por avaliaçõesrealizadas durante os anos 2007-2008 (20,245 avaliações) e 2010-2011(16,432 avaliações). Os resultados atestam que um modelo hierárquico descrevemelhor a estruturação dos questionários que os modelos alternativos, que o modode administração tem uma influência sobre a taxa de respostas e, em certos casos,sobre a taxa de satisfação do ensino, mas que não tem influência nem na fiabilidadenem na dimensionalidade das avaliações. As implicações destes resultadossão discutidas.

Palavras chaves:

• avaliação do ensino,
• modalidades,
• online vs. papel,
• validade