Mesure et évaluation en éducation
Volume 42, numéro 3, 2019
Sommaire (4 articles)
-
Évaluer le transfert des compétences infirmières : analyse des effets d’une formation en soins intermédiaires en milieu hospitalier
Yves Chochard, Jenny Gentizon et Serge Gallant
p. 1–27
RésuméFR :
Cette recherche porte sur l’évaluation de l’efficacité d’une formation en milieu hospitalier à partir d’indicateurs de taille d’effet et d’indice d’hétérogénéité. L’évaluation portait sur une formation en soins intermédiaires destinée aux infirmières et infirmiers d’une durée de 23 jours et qui intégrait notamment trois jours d’enseignement clinique au chevet du patient. Les compétences ont été mesurées en début et en fin de formation, à partir d’une grille d’observation standardisée basée sur les rôles d’expert clinique, de communicateur, de collaborateur, de manager et d’apprenant-formateur. Les estimateurs de Cohen et de Glass ont démontré des effets significatifs de la formation sur les cinq domaines, tandis que l’indice d’hétérogénéité a mis en évidence une réduction des disparités de comportements au sein du groupe au terme de la formation. La discussion aborde la question des balises utilisées pour interpréter les tailles d’effet.
EN :
This research focuses on evaluating the effectiveness of a training course in a hospital setting, using indicators of effect size and heterogeneity index. The evaluation focused on a training course in intermediate care for nurses. The course lasted 23 days and included three days of clinical teaching at the patient’s bedside. The skills were measured at the beginning and end of the training course, using an observation grid based on five competency domains: clinical expert, communicator, collaborator, leader and learner-trainer. Cohen’s and Glass’s estimators demonstrated significant effects of training on the five domains, while the heterogeneity index showed a reduction in behavioral disparities within the nursing group at the end of the training course. The discussion addresses the issues about the boundaries used to interpret effect sizes.
PT :
Esta investigação trata da avaliação da eficácia da formação em ambiente hospitalar por meio de indicadores de tamanho do efeito e de índice de heterogeneidade. A avaliação abrangeu um curso de formação em cuidados intermediários destinado às enfermeiras e aos enfermeiros com uma duração de 23 dias e que incluiu três dias de ensino clínico realizado à cabeceira do paciente. As competências foram medidas no início e no final da formação, a partir de uma grelha de observação padronizada com base nas funções de especialista clínico, de comunicador, de colaborador, de gestor e de aprendiz-formador. Os estimadores de Cohen e Glass demonstraram efeitos significativos da formação em todos os cinco domínios, enquanto o Índice de heterogeneidade evidenciou uma redução das disparidades comportamentais dentro do grupo após a conclusão da formação. A discussão aborda a questão das marcas utilizadas para interpretar os tamanhos do efeito.
-
Analyses diagnostiques cognitives des résultats du test du Programme international de recherche en lecture scolaire (PIRLS) 2011
Dan Thanh Duong Thi et Nathalie Loye
p. 29–69
RésuméFR :
Malgré une importante demande de recevoir des informations diagnostiques sur les difficultés en lecture des élèves, il existe très peu d’outils d’évaluation conçus spécifiquement pour cet usage. Plusieurs recherches en approche diagnostique cognitive (ADC) utilisent donc les résultats d’épreuves à grande échelle pour fournir de la rétroaction diagnostique fine et fiable sur les forces et les faiblesses des élèves. Les modélisations de données permettent de s’éloigner des scores ou des rangs percentiles habituellement obtenus, et de fournir des pistes d’intervention appropriées. Cette étude vise à vérifier la faisabilité d’appliquer des modélisations à visée diagnostique aux résultats de 4762 élèves canadiens ayant fait le cahier 13 du test du PIRLS de 2011. Les résultats suggèrent un potentiel de recevoir de la rétroaction diagnostique détaillée de leurs forces et faiblesses sur les habiletés sous-jacentes du test.
EN :
Despite the grand demand to receive diagnostic information about students’ difficulties in reading, there are very few tests specifically designed for diagnostic purposes. Therefore, many researches in cognitive diagnostic approach (CDA) use large-scale test results to provide fine and reliable diagnostic feedback on the strengths and weaknesses of students other than the total scores or percentiles ranks, which allow appropriate intervention. This study shows an example of the application of diagnostic modeling using data from 4,762 Canadian students who completed booklet 13 of the PIRLS test in 2011. The results highlight the potential for detailed diagnostic feedback of students’ strengths and weaknesses on the underlying skills identified in the test.
PT :
Apesar da importante procura por informações diagnósticas sobre as dificuldades de leitura dos alunos, existem muito poucas ferramentas de avaliação concebidas especificamente para este uso. Diversas investigações em abordagem de diagnóstica cognitiva (ADC) utilizam, portanto, os resultados de testes em larga escala para fornecer feedback diagnóstico detalhado e fiável sobre os pontos fortes e fracos dos alunos. As modelizações de dados torna possível afastar-se das pontuações ou dos níveis percentuais normalmente obtidos e fornecer pistas de intervenção apropriadas. Este estudo tem como objetivo verificar a viabilidade da aplicação da modelização diagnóstica aos resultados de 4.762 alunos canadianos que realizaram o caderno 13 do teste do PIRLS de 2011. Os resultados realçam o potencial para um feedback diagnóstico detalhado dos pontos fortes e fracos dos alunos em relação às habilidades subjacentes ao teste.
-
Évaluer les connaissances orthographiques à l’aide d’une démarche d’analyse fine des erreurs
Marie-Pier Godin, Andréanne Gagné et Nathalie Chapleau
p. 71–108
RésuméFR :
L’évaluation de l’orthographe lexicale se fait généralement au moyen d’un dénombrement d’erreurs et par la simple cotation correcte/incorrecte. Cette méthode a pour conséquences d’offrir peu d’informations sur les connaissances orthographiques des élèves et de peu orienter les interventions des enseignants. S’appuyant sur les dimensions phonographiques, orthographiques et morphographiques de l’orthographe lexicale, cet article théorique propose une démarche d’analyse fine des erreurs pour les chercheurs s’intéressant à ce domaine, mais aussi pour les enseignants. Afin d’en illustrer le fonctionnement, des exemples d’erreurs en orthographe lexicale produits par deux élèves du primaire sont présentés et analysés. Enfin, les avantages et les limites associés à cette démarche sont décrits et discutés. Cet article contribue, d’une part, à une meilleure compréhension des connaissances langagières impliquées en orthographe lexicale et, d’autre part, à fournir des assises pour évaluer plus précisément les connaissances orthographiques.
EN :
Spelling assessment is generally made through a correct/incorrect scoring system to quantify students’ spellings. This method does not provide precise information on orthographic knowledge and is not intended to guide teachers in their interventions. Relying on the phonographic, orthographic and morphographic dimensions, this theoretical article proposes a fine-grained spelling analysis procedure for both researchers in education and teachers. To explain its inner workings, some examples of spelling errors made by two elementary students are presented and analyzed. Lastly, advantages and limitations related to this procedure are discussed. This article contributes to a better understanding of the language abilities that are implied in spelling and provides foundation to assess more accurately orthographic knowledge.
PT :
A avaliação da ortografia lexical faz-se geralmente através da contagem dos erros e pela simples cotação correto/incorreto. Este método tem como consequência oferecer poucas informações sobre os conhecimentos ortográficos dos alunos e de pouco orientar as intervenções dos professores. Com base nas dimensões fonográficas, ortográficas e morfográficas da ortografia lexical, este artigo teórico propõe uma abordagem de análise fina dos erros para os investigadores interessados neste campo, mas também para professores. Para ilustrar o seu funcionamento, são apresentados e analisados exemplos de erros em ortografia lexical produzidos por dois alunos do ensino básico. Finalmente, as vantagens e as limitações associadas a esta abordagem são descritas e discutidas. Este artigo contribui, por um lado, para uma melhor compreensão das competências linguísticas envolvidas na ortografia lexical e, por outro lado, para fornecer bases para se avaliar com mais precisão os conhecimentos ortográficos.
-
Liens entre les composantes des dispositifs d’enseignement hybride et les performances des étudiants de l’enseignement supérieur : une revue systématique
Margault Sacré, Dominique Lafontaine et Marie-Christine Toczek
p. 109–152
RésuméFR :
Les dispositifs d’enseignement hybride sont de plus en plus répandus dans l’enseignement supérieur. À notre connaissance, les facteurs responsables de leur efficacité sur les apprentissages ne sont pas clairement définis. Cet article a pour ambition, à travers une revue systématique de la littérature, de proposer des éléments de réponse à cette absence de connaissances. Nous présenterons un inventaire et une synthèse des éléments pédagogiques effectivement mis en place dans ce type de dispositif pour mettre en évidence les composantes pédagogiques en lien avec les performances des étudiants, selon la typologie de Burton et ses collaborateurs (2011). À cet égard, nous interrogeons quatre bases de données bibliographiques afin d’en extraire tous les documents (n = 1767) qui étudient l’enseignement hybride. Le corpus d’articles analysés comprend 21 études dans lesquelles sont comparés des dispositifs d’enseignement hybride à d’autres types d’enseignement (apprentissage en ligne et enseignement traditionnel). Un examen de ces documents met en lumière cinq composantes pédagogiques montrant un effet sur les apprentissages. Sans prétendre à une hiérarchisation de ces catégories, nous en proposons une discussion et une synthèse.
EN :
Blended learning is rapidly gaining popularity in higher education. To our knowledge, responsible factors for its effectiveness on learning do not seem clearly defined yet. This article aims, through a systematic review of the literature, to submit elements of response to this apparent lack of knowledge. We present an inventory and a synthesis of the pedagogical elements actually implemented in blended learning to highlight the pedagogical components related to student performance, according to the typology of Burton et al. (2011). In this regard, four bibliographic databases are being searched to extract all documents (n=1767) studying blended learning. The corpus of articles analyzed includes 21 different studies in which blended learning is compared to other types of educational methods (e-learning or traditional learning). An assessment of these documents highlights five educational components that show an impact on learning. Without claiming to rank them against each other, we put forward a discussion and a synthesis of these components.
PT :
Os dispositivos de ensino híbrido estão cada vez mais difundidos no ensino superior. Tanto quanto sabemos, os fatores responsáveis pela sua eficácia na aprendizagem não estão claramente definidos. Este artigo tem como objetivo, por meio de uma revisão sistemática da literatura, propor elementos de resposta para esta ausência de conhecimentos. Apresentaremos um inventário e uma síntese dos elementos pedagógicos efetivamente implementados neste tipo de dispositivo para evidenciar os componentes pedagógicos ligados aos desempenhos dos estudantes, de acordo com a tipologia de Burton e dos seus colaboradores (2011). A este respeito, consultamos quatro bases de dados bibliográficos a fim de extrair todos os documentos (n = 1767) que estudam o ensino híbrido. O corpo de artigos analisados inclui 21 estudos nos quais os sistemas de ensino híbrido são comparados a outros tipos de ensino (aprendizagem online e ensino tradicional). Um exame destes documentos destaca cinco componentes pedagógicos que mostram um efeito nas aprendizagens. Sem pretender hierarquizar estas categorias, propomos uma discussão e uma síntese.