Mesure et évaluation en éducation
Volume 47, Number 1, 2024
Table of contents (9 articles)
-
Éditorial
-
L’évaluation face aux enjeux contemporains – Tendances et émergences : introduction
-
Cinq enjeux d’évaluation face à l’émergence des IA génératives en éducation
Jacques Audran
pp. 6–26
AbstractFR:
Depuis novembre 2022, les acteurs de l’éducation s’émeuvent de l’apparition de services informatiques qui permettent de générer des textes, des images ou des sons en une simple requête. Ces programmes désignés sous le nom d’intelligences artificielles génératives font l’objet d’une forte médiatisation. En évaluation, de nouveaux enjeux apparaissent : 1) Sait-on déterminer les compétences à évaluer chez les élèves, utilisateurs potentiels de ces technologies ? 2) Sait-on faire la différence entre production humaine et machinique ? 3) Peut-on évaluer, sur le fond, des productions qui pratiquent l’illusion de la forme ? 4) Comment évaluer la dimension authentique d’une production d’élève ? 5) Sait-on évaluer les potentialités éducatives de ces technologies ? Relever ces cinq enjeux suppose une sensibilisation des enseignants et des formateurs à la pratique d’une évaluation éthique et formative apte à tirer parti de ces technologies pour préparer les élèves à des technologies qui seront bientôt banales à l’école.
EN:
Since November 2022, educators have been concerned about the emergence of computer services that generate texts, images, or sounds based on a simple textual request. These computer applications, referred to as Generative Artificial Intelligence (GAI), have been heavily publicized. In the area of evaluation, new challenges arise: 1) Can we determine the skills to assess in students, who are potential users of GAI ? 2) Can we differentiate between human and machine production ? 3) Can we evaluate, in substance, productions that use the form as an illusion generator ? 4) How can we realize an authentic evaluation of a student’s production ? 5) Do we know how to evaluate the educational potential of these technologies ? To address these five challenges, it is necessary to raise teachers and trainers’ awareness to the practice of ethical and formative assessment capable of harnessing these technologies to prepare students for technologies that will soon become commonplace in schools.
PT:
Desde novembro de 2022, os atores da educação estão preocupados com o surgimento de serviços de informática que permitem gerar textos, imagens ou sons com uma simples solicitação. Estes programas, conhecidos como inteligências artificiais generativas, têm recebido grande atenção mediática. Na avaliação, surgem novos desafios: 1) É possível determinar as competências a serem avaliadas nos alunos, utilizadores potenciais dessas tecnologias ? 2) É possível distinguir entre produções humanas e maquinais ? 3) É possível avaliar, no fundo, produções que praticam a ilusão da forma ? 4) Como avaliar a dimensão autêntica de uma produção de um aluno ? 5) É possível avaliar as potencialidades educativas destas tecnologias ? Enfrentar estes cinco desafios exige uma sensibilização dos professores e formadores para a prática de uma avaliação ética e formativa, capaz de tirar proveito destas tecnologias para preparar os alunos para tecnologias que em breve serão comuns nas escolas.
-
Le travail collectif des enseignants pour l’évaluation des apprentissages comme norme professionnelle ? Une revue de la littérature pour interroger cette tendance émergente
Jean-Pascal Ochelen, Gonzague Yerly and Lucie Mottier Lopez
pp. 27–65
AbstractFR:
L’article présente une rapid review de la littérature anglophone et francophone sur le travail collectif des enseignants pour l’évaluation des apprentissages. Ce genre de travail collectif tend à devenir une norme dans les systèmes éducatifs, soulevant des enjeux majeurs dans le champ de l’évaluation en éducation. La littérature compte déjà des synthèses et des recherches empiriques qui traitent de la collaboration des enseignants de manière générale, mais aucune ne traite spécifiquement des pratiques évaluatives collectives. Cette recherche documentaire dans la littérature conduit à la sélection de 30 articles, aux niveaux primaire et secondaire. L’analyse de ces articles permet 1) d’identifier les dynamiques mises en place dans les établissements et 2) d’observer les conséquences pour tous les acteurs de l’école. Les résultats permettent de discuter de certaines tensions liées à cette tendance, au point de vue des politiques de pilotage mais également sur le plan des pratiques évaluatives individuelles et collectives.
EN:
This paper presents a rapid review of the Anglophone and Francophone literature on collaboration among teachers to assess learning. This kind of collective work tends to become a norm in education systems, raising major issues in the field of educational assessment. The literature already contains summaries of empirical research dealing with teacher collaboration in general, but none dealing specifically with collective assessment practices. A systematic literature search led to the selection of 30 articles, in primary and secondary education. Analysis of these articles allows us to 1) identify the dynamics at work in the schools and 2) observe the consequences for all those involved in the school. The results allow us to discuss certain tensions linked to this trend, from the point of view of steering policies, but also about individual and collective evaluation practices.
PT:
O artigo apresenta uma rapid review da literatura anglófona e francófona sobre o trabalho coletivo dos professores para a avaliação das aprendizagens. Este tipo de trabalho coletivo tende a tornar-se uma norma nos sistemas educativos, levantando questões importantes no campo da avaliação em educação. A literatura já inclui sínteses e investigações empíricas que abordam a colaboração entre professores de forma geral, mas nenhuma trata especificamente das práticas avaliativas coletivas. Esta investigação documental na literatura resulta na seleção de 30 artigos, nos níveis primário e secundário. A análise destes artigos permite 1) identificar as dinâmicas implementadas nas instituições e 2) observar as consequências para todos os atores da escola. Os resultados possibilitam discutir algumas tensões associadas a esta tendência, tanto do ponto de vista das políticas de gestão como no que respeita às práticas avaliativas individuais e coletivas.
-
Entre jeux de pouvoir et intérêts : retour à la raison d’être de l’évaluation
Marie-Pier Marchand and Marthe Hurteau
pp. 66–90
AbstractFR:
La crédibilité accordée aux résultats d’une évaluation par les parties prenantes demeure une préoccupation importante chez les personnes évaluatrices. Comment les parties prenantes, porteuses d’intérêts, perçoivent-elles la démarche évaluative et les résultats qu’elle génère comme crédibles ? L’article présente les résultats d’une recherche ayant permis de documenter la perspective des parties prenantes à cet égard. Discutés sous l’angle comparatif avec la perspective de la personne évaluatrice, les résultats indiquent que les discours convergent sur plusieurs plans, mais qu’une divergence potentielle peut être observée quant aux finalités poursuivies dans le cadre de l’évaluation. Les constats mettent en relief plusieurs questionnements réflexifs quant aux implications de cette divergence pour la pratique de l’évaluation, lesquels mènent à conclure avec une piste de solution innovante exigeant un certain repositionnement dans la façon d’approcher une évaluation et dans les relations avec les parties prenantes.
EN:
The credibility given to evaluation results by stakeholders remains a significant concern for evaluators. How do stakeholders, who are interested parties, perceive the evaluation process and the credibility of the generated results? This article presents the documented perceptions of stakeholders as to the credibility of the obtained results and the overarching process. These perceptions are then compared to evaluators’ points of view. The discourses converge on several levels ; however, a potential divergence is underlined in the way stakeholders and evaluators come to understand the aim of the evaluation process. The analysis thus focuses on this divergence and its implications of the evaluation process in such a way that an innovative solution is submitted, which requires, nevertheless, a repositioning of the evaluators’ relationship to the approach and to stakeholders.
PT:
A credibilidade atribuída aos resultados de uma avaliação pelas partes interessadas continua a ser uma preocupação importante para os avaliadores. Como é que as partes interessadas, que têm os seus próprios interesses, percebem o processo avaliativo e os resultados que dele decorrem como credíveis? O artigo apresenta os resultados de uma investigação que documentou a perspetiva das partes interessadas a este respeito. Discutidos numa perspetiva comparativa com a perspetiva do avaliador, os resultados indicam que os discursos convergem em vários aspetos, mas que pode ser observada uma potencial divergência quanto às finalidades pretendidas no âmbito da avaliação. As conclusões salientam várias questões reflexivas quanto às implicações desta divergência para a prática de avaliação, levando à proposta de uma solução inovadora que exige um reposicionamento na forma de abordar a avaliação e nas relações com as partes interessadas.
-
Penser l’évaluation-soutien d’apprentissage face aux enjeux contemporains par la coconstruction d’une microculture de classe comme ressource à des fins de régulation des apprentissages
Valérie Soubre
pp. 91–119
AbstractFR:
Cet article a pour objet d’étude la coconstruction d’une microculture de classe dans les situations d’évaluation-soutien d’apprentissage dans l’enseignement supérieur. Son objectif est d’investiguer plus spécialement des processus et des phénomènes pour tenter de circonscrire et de préciser ce que pourrait être aujourd’hui, dans le cadre des questionnements actuels à l’université française, l’accompagnement des étudiants dans des processus d’évaluation-soutien d’apprentissage. Les données sont issues d’observation menées en classe et d’entretiens réalisés avec les enseignants et les apprenants. Les résultats permettent de documenter ce que signifie et ce qu’implique cette conception de l’évaluation des apprentissages des étudiants en matière de ressource à des fins de régulation et d’autorégulation des apprentissages.
EN:
The purpose of this article is to study the coconstruction of a classroom microculture in situations of assessment in support of learning as an object of study in higher education. The aim is to investigate processes and phenomena in an attempt to define and clarify what might be involved today, in the context of current issues at French universities, in supporting students in assessment and learning processes. The data are drawn from classroom observations and interviews with teachers and learners. The results show what this conception of student learning assessment means and implies in terms of a resource for regulating learning.
PT:
Este artigo tem como objeto de estudo a coconstrução de uma microcultura de sala de aula nas situações de avaliação-suporte à aprendizagem no ensino superior. O seu objetivo é investigar de forma mais específica processos e fenómenos para tentar circunscrever e precisar o que poderia ser, hoje em dia, no âmbito das questões atuais nas universidades francesas, o acompanhamento dos estudantes em processos de avaliação-suporte à aprendizagem. Os dados são provenientes de observações realizadas em sala de aula e de entrevistas efetuadas com os docentes e os aprendentes. Os resultados permitem documentar o que significa e o que implica esta conceção da avaliação das aprendizagens dos estudantes no que diz respeito a recursos para a regulação e autorregulação das aprendizagens.
-
Les stratégies de coping et le sentiment d’efficacité personnelle face aux évaluations sommatives
Alexandre Mabilon
pp. 120–154
AbstractFR:
Cet article tente d’appréhender les stratégies de coping déployées par les adolescents dans le cadre des évaluations sommatives (Zimmer-Gembeck & Skinner, 2016) et d’approfondir la relation entre ces stratégies, le stress ressenti et le sentiment d’efficacité personnelle (Bandura et al., 2003) perçu par une population en pleine période de développement. Les données sont issues de mesures autorapportées auprès d’un échantillon de 660 élèves de l’enseignement secondaire. Les résultats montrent que l’investissement dans un style de coping (Connor-Smith & Flachsbart, 2007) axé sur la résolution du problème perçu et la recherche de soutien social favorise l’amoindrissement du stress ainsi que le développement du sentiment d’efficacité personnelle. La recherche permet de mettre en évidence les défis liés au stress et à sa gestion face aux activités stressantes que représentent les évaluations sommatives. Elle offre également l’occasion de souligner le rôle de l’environnement d’apprentissage dans l’utilisation des évaluations sommatives afin de limiter les conséquences négatives pour l’apprentissage des adolescents.
EN:
This paper aims to understand the coping strategies used by adolescents in the context of summative assessments (Zimmer-Gembeck & Skinner, 2016) It provides an opportunity to explore the relationship between these strategies, the perceived stress, and self-efficacy (Bandura et al., 2003) among a population in the midst of development. The data are based on self-reported measures from a sample of 660 secondary school students. The results show that using a coping style (Connor-Smith & Flachsbart, 2007) focused on problem solving and seeking social support promote stress reduction and the development of self-efficacy. This research highlights the issues associated with stress and its management when facing stressful activities such as summative assessments. It also allows to highlight the role of the learning environment in the use of summative assessments to limit negative consequences for the adolescents’ learning.
PT:
Este artigo procura compreender as estratégias de coping utilizadas pelos adolescentes durante as avaliações sumativas (Zimmer-Gembeck & Skinner, 2016) e aprofundar a relação entre essas estratégias, o stress percebido e o sentimento de eficácia pessoal (Bandura et al., 2003) numa população em plena fase de desenvolvimento. Os dados foram recolhidos a partir de medidas autorrelatadas de uma amostra de 660 estudantes do ensino secundário. Os resultados mostram que o investimento num estilo de coping (Connor-Smith & Flachsbart, 2007) voltado para a resolução de problemas percebidos e a busca por apoio social favorecem a redução do stress, além de contribuir para o desenvolvimento do sentimento de eficácia pessoal. A investigação destaca os desafios relacionados com o stress e a sua gestão face às atividades stressantes que as avaliações sumativas representam. Oferece ainda a oportunidade de enfatizar o papel do ambiente de aprendizagem no uso das avaliações sumativas para limitar as consequências negativas para a aprendizagem dos adolescentes.
-
Évaluation du processus cognitif de visualisation utilisé dans l’apprentissage de la géométrie
Romain Beauset, Clarisse Lequeu and Natacha Duroisin
pp. 155–189
AbstractFR:
L’évaluation de processus cognitifs impliqués dans l’apprentissage de la géométrie constitue un réel défi pour comprendre de nombreuses difficultés d’apprentissage dans ce domaine. Cet article investigue l’évaluation de processus cognitifs au travers de deux études portant sur l’habileté de visualisation spatiale. Centrée sur la géométrie plane, la première étude utilise une épreuve de type papier-crayon, réalisée auprès d’élèves en fin d’enseignement primaire, pour évaluer les capacités de visualisation des figures. Centrée sur la géométrie tridimensionnelle, la seconde étude implique une épreuve évaluant la visualisation spatiale réalisée avec du matériel virtuel comme alternative aux épreuves papier-crayon, auprès d’élèves du primaire et du secondaire inférieur. En analysant notamment certaines productions d’élèves, l’objectif de cet article est également de poser un regard critique sur l’évaluation de processus cognitifs en présentant les limites relatives aux évaluations présentées et en identifiant des alternatives offertes par l’émergence des nouvelles technologies, entre autres.
EN:
Assessment of cognitive processes involved in the learning of geometry is a real challenge to understand difficulties learners faced. This article investigates the assessment of cognitive processes through two studies on the spatial visualisation ability, a first in plane geometry and a second in 3D geometry. The first study uses a paper-and-pencil test used to assess the ability to visualize plane figures at the end of primary education. The second employs a test that uses virtual material, as an alternative to paper-and-pencil test, to assess 3D spatial visualisation with primary and secondary learners. After a description of the two assessment tools, the aim of this article is to take a critical look at the evaluation of cognitive processes by presenting the limits relating to these tools and by identifying the alternatives offered notably with the emergence of new technologies.
PT:
A avaliação dos processos cognitivos envolvidos na aprendizagem da geometria representa um grande desafio para compreender as diversas dificuldades de aprendizagem neste domínio. Este artigo investiga a avaliação de processos cognitivos por meio de dois estudos focados nas habilidades de visualização espacial. Centrado na geometria plana, o primeiro estudo utiliza uma prova do tipo papel e lápis, aplicada a alunos do final do ensino básico, para avaliar as suas habilidades de visualização de figuras. Focando na geometria tridimensional, o segundo estudo envolve uma prova de avaliação da visualização espacial realizada com material virtual como alternativa às provas tradicionais de papel e lápis, aplicada a alunos do ensino básico e do ensino secundário. Ao analisar, especialmente, algumas produções dos alunos, o objetivo deste artigo é também adotar uma visão crítica sobre a avaliação dos processos cognitivos, apresentando as limitações das avaliações descritas e identificando alternativas oferecidas pelo surgimento das novas tecnologias, entre outras.
-
Le PhonoTELEQ : l’élaboration d’un test de conscience phonologique pour les enfants franco-québécois de la 1re à la 6e année du primaire
Janie Mendes, Nathalie Chapleau and Bruno Gauthier
pp. 190–221
AbstractFR:
La conscience phonologique est reconnue comme étant liée à l’apprentissage du langage écrit. Cependant, au Québec, les professionnels intervenant auprès d’élèves ayant des difficultés de lecture/écriture disposent de peu d’outils normalisés pour évaluer la conscience phonologique des jeunes franco-québécois. C’est pour cette raison que le PhonoTELEQ, un test évaluant la conscience phonologique des enfants franco-québécois de la 1re à la 6e année du primaire, a été élaboré. Ce test administré à l’oral comporte six tâches impliquant différentes manipulations épi- et métaphonologiques ciblant les diverses unités et positions dans le mot. Lors de l’élaboration du test, les items ont été conçus selon différents critères, lesquels seront précisés dans cet article. Une validation préliminaire du contenu avec l’aide de deux expertes et une étude pilote de prévalidation auprès de 14 enfants ont permis de peaufiner les consignes et les items afin que le PhonoTELEQ puisse prochainement être validé à plus grande échelle.
EN:
Phonological awareness is well recognized as being linked to the learning of written language. However, in Quebec, professionals working with students with reading and writing difficulties currently have few standardized tools for assessing phonological awareness in French-speaking children from Quebec. As a result, PhonoTELEQ, a test assessing phonological awareness in Franco-Quebecois children from grades 1 to 6, was developed. PhonoTELEQ, which is administered orally, consists of six tasks involving various epi- and metaphonological manipulations targeting the various units and positions within the word. During test development, items were selected according to various criteria, which will be presented in detail in this article. A preliminary validation of the content with the help of two experts and a pilot pre-validation study with 14 primary school children were carried out, enabling the instructions and items to be fine-tuned so that PhonoTELEQ could be validated on a larger scale.
PT:
A consciência fonológica é reconhecida como um fator importante para a aprendizagem da linguagem escrita. No entanto, no Quebeque, os profissionais que trabalham com alunos com dificuldades de leitura/escrita dispõem de poucos instrumentos normalizados para avaliar a consciência fonológica de jovens franco-quebequenses. Por essa razão, foi desenvolvido o PhonoTELEQ, um teste para avaliar a consciência fonológica de crianças franco-quebequenses do 1.º ao 6.º ano do ensino básico. Este teste, administrado oralmente, contém seis tarefas que envolvem diferentes manipulações epi- e metafonológicas, com foco nas diversas unidades e posições dentro da palavra. Durante o desenvolvimento do teste, os itens foram elaborados com base em diferentes critérios, os quais serão detalhados neste artigo. Foi realizada uma validação preliminar do conteúdo com a ajuda de duas especialistas e um estudo piloto de pré-validação com 14 crianças, o que possibilitou aprimorar as instruções e os itens, de forma que o PhonoTELEQ possa em breve ser validado numa escala maior.