Mesure et évaluation en éducation
Volume 42, Number 2, 2019
Table of contents (4 articles)
-
Étude sur la propension à tricher aux examens à l’université : élaboration et processus de validation du Questionnaire sur la tricherie aux examens à l’université (QTEU)
Eric Frenette, Sylvie Fontaine, Marie-Hélène Hébert and Mikhaël Éthier
pp. 1–33
AbstractFR:
Cet article présente la démarche en sept étapes visant à maximiser l’obtention de preuves de validité qui a mené à l’élaboration du Questionnaire sur la tricherie aux examens à l’université (QTEU). Composé de 28 énoncés répartis sous 7 facteurs (propension à tricher aux examens, influence des pairs, modalités pour tricher, contexte institutionnel, perception de contrôle, but de performance et engagement dans les études), le QTEU a été conçu en prenant appui sur une analyse conceptuelle approfondie de la littérature scientifique sur la tricherie aux examens et sur les travaux de Frenette, Hébert, Thibodeau et Ndinga (2018) sur la manière d’élaborer un questionnaire présentant diverses preuves de validité. Grâce à ses qualités psychométriques acceptables, le QTEU vient combler un besoin de questionnaire de langue française sur la propension à tricher aux examens et permet de mesurer son étendue auprès des étudiants universitaires.
EN:
This article presents the seven-step process to maximize validity evidence that led to the development of the Questionnaire sur la tricherie aux examens à l’université (QTEU). Composed of 28 items grouped into 7 factors (cheating on exams, peers’ influence, methods of cheating, institutional context, perception of control, performance goal and commitment to studies), the QTEU was developed based on an in-depth conceptual analysis review of the scientific literature on cheating on exams and on the work of Frenette, Hébert, Thibodeau, and Ndinga (2018) on scale development with several evidences of validity. Presenting acceptable psychometric qualities, the QTEU fills a need for French-language questionnaire on the predisposition of cheating on exams and allows the measure of its amplitude within university students.
PT:
Este artigo apresenta o processo em sete etapas para maximizar a obtenção de provas de validade que levou à elaboração do Questionário sobre a fraude nos exames na universidade (QTEU). Composto por 28 afirmações divididas em 7 fatores (propensão a praticar fraude nos exames, influência dos colegas, modalidades de fraude, contexto institucional, percepção do controlo, objetivo de desempenho e compromisso nos estudos), o QTEU foi concebido com base numa análise concetual aprofundada da literatura científica sobre a fraude em exames e sobre os trabalhos de Frenette, Hébert, Thibodeau e Ndinga (2018) sobre a maneira de elaborar um questionário que apresente diversas provas de validade. Graças às suas qualidades psicométricas aceitáveis, o QTEU vem colmatar a necessidade de um questionário em língua francesa sobre a propensão para praticar fraudes nos exames e permite medir sua extensão junto de estudantes universitários.
-
Évaluation par compétences : les préoccupations des enseignants en matière d’évaluation au cours d’une expérimentation des « classes sans notes » dans un collège français
Éric Saillot
pp. 35–61
AbstractFR:
Cet article s’appuie sur une recherche collaborative menée de 2016 à 2018 dans un collège français sur les « classes sans notes », expérimentation qui propose une évaluation des élèves par compétences, et non plus avec des notes chiffrées. Notre problématique vise à mieux comprendre les préoccupations des enseignants qui doivent évaluer sans le système de notation sur 20. Nous avons mené 1 entretien avec 5 cadres dirigeants, 4 groupes de discussion avec 26 enseignants et des réunions collectives, dans l’esprit des « disputes professionnelles réglées » de Clot (2006). Nous avons identifié six types de préoccupations relatives aux pratiques évaluatives par compétences.
EN:
This article is based on a collaborative research on competency-based assessment in classrooms, led in a French middle school, from 2016 to 2018. Our purpose is to understand better concerns of teachers who have to make assessments without the French system based on a note on 20. We led 1 interview with 5 managers, 4 focus groups with 26 teachers, and collective meetings, led with the methodological approach of «adjusted professional quarrels» from Clot (2006). We have identified six types of teachers’ concerns about competence-based assessment.
PT:
Este artigo baseia-se numa investigação colaborativa realizada de 2016 a 2018 numa escola básica do 3.º Ciclo do Ensino Básico sobre as «turmas sem notas», uma experiência que propõe uma avaliação dos alunos por competências e não com classificações. A nossa problemática visa compreender melhor as preocupações dos professores que devem avaliar sem o sistema de classificação de 0-20. Realizamos 1 entrevista com 5 gestores escolares, 4 grupos de discussão com 26 professores e reuniões coletivas, no espírito das «disputas profissionais reguladas» de Clot (2006). Identificamos seis tipos de preocupações relativas às práticas de avaliação por competências.
-
Effet des classes et des écoles sur les performances en mathématiques des élèves de 4e année du primaire de la Province orientale en République démocratique du Congo
Gratien Bambanota Mokonzi, Jan Van Damme, Bieke De Fraine, Oscar Asobee Gboisso and Jean-Paul Legono Bela
pp. 63–108
AbstractFR:
Cette étude examine l’impact des classes et des écoles sur les performances en mathématiques des élèves de 4e année du primaire dans deux villes de la République démocratique du Congo en recourant à l’analyse multiniveau. Elle révèle que 71 %, 16 % et 13 % de la variance totale se situent respectivement aux niveaux élève, classe et école. L’étude montre en outre qu’au-delà de l’effet des caractéristiques individuelles, les caractéristiques de la classe expliquent 2,9 % (niveau classe) et 3,4 % (niveau école) de la variance totale. Cependant, seules la moyenne de la classe au prétest et la taille de classe sont significativement associées aux performances des élèves. L’étude montre enfin que si les caractéristiques de l’école expliquent 1,5 % de la variance totale située au niveau de l’école, l’expérience du directeur est le seul prédicteur significatif des performances des élèves.
EN:
Based on a multilevel analysis, this study explores the impact of classes and schools on the mathematics performance of 4th grade elementary students in two cities of the Democratic Republic of the Congo. It reveals that, out of the total variance, 71%, 16% and 13% are situated at student, classroom and school levels, respectively. The study further shows that beyond the effect of individual characteristics, class characteristics explain 2.9% of the variance situated at class level and 3.4% of the variance located at school level. However, only the pretest class average and class size are significantly associated with student performance. The study finally shows that if school characteristics explain 1.5% of the variance situated at school level, the principal’s experience stands for the unique significant predictor of students’ performance.
PT:
Este estudo examina o impacto das turmas e das escolas no desempenho matemático de alunos do 4.º ano do ensino básico em duas cidades da República Democrática do Congo, recorrendo à análise multinível. Ele revela que 71%, 16% e 1 % da variação total estão localizados respectivamente ao nível do aluno, da turma e da escola. O estudo também mostra que, além do efeito das características individuais, as características da turma explicam 2,9% (nível classe) e 3,4% (nível escola) da variação total. No entanto, apenas a média da turma no pré-teste e o tamanho da turma estão significativamente associados aos desempenhos dos alunos. O estudo mostra finalmente que, se as características da escola explicam 1,5% da variação total localizada ao nível da escola, a experiência do diretor é o único preditor significativo dos desempenhos dos alunos.
Compte-rendu critique
-
Élaboration du Gabarit d’évaluation de l’environnement des programmes : le cas d’une unité universitaire de formation continue au Québec
Anne-Laure Betbeder Laüque
pp. 109–129
AbstractFR:
L’évaluation du contexte professionnel dans lequel s’inscrit un programme universitaire demeure un phénomène peu couvert par la littérature en éducation. Il n’en demeure pas moins que la pertinence sociale des programmes fait partie des critères d’évaluation au Québec (CREPUQ, 2004). Qu’en est-il des unités universitaires de formation continue qui offrent des formations professionnalisantes à des étudiants aux modes d’apprentissage non traditionnels ? Quel est le rôle du conseiller en évaluation de programme au sein de ces unités ? La démarche scientifique ayant servi d’assise à la conception d’un gabarit d’évaluation de l’environnement des programmes sera ici justifiée (Rossi, Lipsey et Freeman, 2003 ; Nadeau, 1988 ; Jorro, 2009 ; Scriven, 1996 ; Newcomer, Hatry et Wholey, 2015). Cet outil vise l’aide à la prise de décision (Dubois et Marceau, 2005) et à l’amélioration continue des programmes par voie d’une évaluation formative (Scriven, 1996 ; Rossi et al., 2003 ; Newcomer et al., 2015). Il sera également fait mention des critères d’évaluation retenus afin de mesurer l’écart entre la formation offerte et les attentes des milieux (savoir, savoir-faire, savoir-être, savoir-devenir et normes professionnelles).
EN:
Evaluating the professional context of a university program remains a phenomenon seldom covered by the literature on education. Nevertheless, it remains that, in Quebec, the social relevance of university programs is part of the evaluation criteria (CREPUQ, 2004). What about academic continuing education units that offer vocational training to non-traditional students? What is the role of the program evaluation advisor within these units? The scientific approach that served as a foundation for developing a template to assess program environments is justified (Rossi, Lipsey, & Freeman, 2003; Nadeau, 1988; Jorro, 2009; Scriven, 199; Newcomer, Hatry, & Wholey, 2015). This tool aims at supporting decision-making (Dubois & Marceau, 2005) and at assuring the continuous improvement of programs through formative evaluations (Scriven, 1996; Rossi et al., 2003; Newcomer et al., 2015). We will also mention the evaluation criteria used to measure the gap between the training provided and the expectations of the environments (knowledge, know-how, interpersonal skills, ability to adapt and professional standards).
PT:
A avaliação do contexto profissional no qual se inscreve um programa universitário continua a ser um fenómeno pouco considerado pela literatura em educação. A verdade é que a pertinência social dos programas faz parte dos critérios de avaliação no Quebeque (CREPUQ, 2004). E as unidades universitárias de formação contínua que oferecem formação profissionalizante aos estudantes através de modos de aprendizagem não tradicionais? Qual é o papel do consultor em avaliação de programas no âmbito dessas unidades? A abordagem científica que serviu de base para o desenho de um modelo de avaliação do contexto dos programas será justificada aqui (Rossi, Lipsey e Freeman, 2003; Nadeau, 1988; Jorro, 2009; Scriven, 1996; Newcomer, Hatry e Wholey, 2015). Esta ferramenta tem como objetivo auxiliar a tomada de decisão (Dubois e Marceau, 2005) e a melhoria contínua dos programas através de uma avaliação formativa (Scriven, 19961; Rossi et al., 2003; Newcomer et al., 2015). Também serão mencionados os critérios de avaliação utilizados para medir a diferença entre a formação oferecida e as expectativas das comunidades (saber, saber-fazer, saber-ser, saber-prever e normas profissionais).