Mesure et évaluation en éducation
Volume 34, numéro 1, 2011
Sommaire (4 articles)
-
L’utilisation de mesures indirectes et directes du comportement dans l’évaluation des interventions ciblant les enfants agressifs
François Poulin, Annick Moisan et Stéphane Cantin
p. 1–23
RésuméFR :
L’efficacité des interventions auxquelles sont exposés les enfants agressifs doit être évaluée avec rigueur. Pour ce faire, les chercheurs et praticiens doivent disposer de mesures fiables, valides, exemptes de biais et qui soient suffisamment sensibles pour permettre de détecter tout changement dans le comportement des enfants. Le premier objectif de cet article consiste à mettre en évidence les limites associées à l’utilisation de mesures indirectes pour évaluer le comportement des enfants exposés à une intervention. Le second objectif vise à illustrer les enjeux associés à l’utilisation de mesures directes basées sur l’observation du comportement. Une analyse des différentes possibilités qui s’offrent aux chercheurs et aux praticiens, notamment en ce qui a trait au choix des comportements ciblés par l’observation et au contexte où se déroule l’observation, est proposée.
EN :
Behavioral outcomes of intervention targeting young aggressive children have to be carefully assessed. Researchers and practioners need reliable, valid, and bias-free instruments that are also sensitive enough to detect any change in children’s behavior. The first goal of this article is to highlight limitations imposed by indirect measures of behavioral assessment with children exposed to an intervention. The second goal is to illustrate issues related to direct behavioral assessment using observation procedure. The different options for researchers and practioners regarding the choice of behavioral targets and observation settings are discussed.
PT :
A eficácia das intervenções às quais são expostas as crianças agressivas deve ser avaliada com rigor. Para tal, os investigadores e os práticos devem dispor de medições fiáveis, válidas, isentas de enviesamentos e que sejam suficientemente sensíveis para permitir detectar toda a mudança no comportamento das crianças. o primeiro objectivo deste artigo consiste em evidenciar os limites associados à utilização de medições indirectas para avaliar o comportamento das crianças expostas a uma intervenção. o segundo objectivo visa ilustrar os desafios associados à utilização de medições directas baseadas sobre a observação do comportamento. é proposta uma análise das diferentes possibilidades que se apresentam aos investigadores e aos práticos, nomeadamente no que se refere à escolha de comportamentos-alvo para a observação e ao contexto no qual se desenvolve a observação.
-
Analyse des différentes facettes influant sur la fidélité de l’épreuve d’expression écrite d’un test de français langue étrangère
Dominique Casanova et Marc Demeuse
p. 25–53
RésuméFR :
Le contrôle de la qualité des évaluations des productions écrites en français langue étrangère pose de nombreuses questions, encore amplifiées lorsqu’il s’agit de tests à forts enjeux pour les candidats. Cet article illustre comment ce contrôle peut s’appuyer à la fois sur la théorie de la généralisabilité et sur le modèle multifacettes de Rasch pour relever les sources d’erreur (stabilité inter- et intracorrecteurs, variation des stimuli fournis aux candidats pour produire leurs textes…) et en estimer l’importance respective dans le cadre d’un monitorage de la qualité d’une épreuve de français langue étrangère.
EN :
Quality control of written productions in French as a foreign language is a tricky issue, especially when the test is used to make high stakes decisions. This paper shows the complementarity of the generalizability theory and the many-facets Rasch model in order to identify and to estimate the size of the different sources of error in a quality monitoring process.
PT :
O controlo de qualidade das avaliações das produções escritas em Francês enquanto língua estrangeira coloca muitas questões, ainda para mais porque se trata de testes decisivos para os candidatos. este artigo ilustra como este controlo se pode apoiar, ao mesmo tempo, na teoria da generalizabilidade e no modelo multi-facetas de Rasch para identificar as fontes de erro (estabilidade inter e intracorrectores, variação dos estímulos fornecidos aos candidatos para produzirem o seus textos…) e prever a importância respectiva no quadro de uma monitorização da qualidade de uma prova de Francês como língua estrangeira.
-
Un modèle en pistes causales pour appréhender la complexité du phénomène d’accrochage scolaire lors de la transition primaire-secondaire
Débora Poncelet et Dominique Lafontaine
p. 55–95
RésuméFR :
Tous les élèves sont affectés d’une manière ou d’une autre par le passage du primaire au secondaire. La recherche suggère que l’échec scolaire constitue un des explicateurs les plus puissants du décrochage scolaire. Le décrochage scolaire est un phénomène multidimensionnel dont les différents facteurs explicatifs sont interdépendants. En plus des facteurs individuels, différentes études ont mis en évidence la relation qui existe entre certaines caractéristiques familiales et le risque de décrochage scolaire : niveau socio-économique, soutien parental, engagement, supervision, valeurs et attentes scolaires sont autant d’éléments issus du monde familial susceptibles d’apporter un éclairage dans la compréhension du décrochage scolaire. Le présent article s’intéresse plus particulièrement à l’étude des perceptions des élèves à l’égard de différents aspects inhérents au milieu familial, à l’école ainsi qu’à différents facteurs de risque associés au jeune durant la période de la transition primaire-secondaire. Il s’agit également de voir comment ces différents facteurs s’influencent mutuellement pour une période scolaire donnée mais aussi de façon longitudinale sur trois années scolaires. Nous recourons à un modèle en pistes causales pour prédire le risque de décrochage scolaire au départ des différents facteurs mesurés. Nos résultats mettent en évidence le rôle central joué par trois variables individuelles dans l’explication directe et indirecte de nos critères : le sentiment du jeune par rapport à l’école et à sa scolarité ainsi que les résultats scolaires. Au vu de nos résultats, il ressort que le comportement social, les méthodes de travail et l’intégration sociale interviennent de façon significative dans le processus d’accrochage scolaire.
EN :
All students appear to be affected in one way or another by the critical transition from elementary to secondary school. research suggests that school failure is among the most important factors to consider when investigating the risk of dropping out. Yet school dropout remains a multidimensional phenomenon and there are a variety of interrelated factors which contribute to its occurrence. beyond the individual factors related to dropout, several studies have also pointed to a series of family characteristics associated with the risk of leaving school early: family socio-economic status, parental support, involvement, and super - vision as well as their values and expectations about their child’s school success, to name a few. families play an important role in student success and affect conditions that might lead to dropping out. Therefore, the current study is particularly interested in examining the students’ perceptions of individual, family, and school related variables predicting dropout risk at the time of the transition from elementary to secondary school. In addition, we also examine how these factors are interrelated for given school period but also in a longitudinal way on three school years. We used path analysis to examine a model predicting the risk of dropping out. Possible interrelations between the variables were also examined. findings revealed that three individual variables directly and indirectly influence our criteria (first the perception of pupils on the school and on its schooling and second, school results). Social behavior, working methods and social integration significantly explain the student dropout risk.
PT :
Todos os alunos são afectados, de um modo ou de outro, pela passagem do básico ao secundário. A investigação sugere que o insucesso escolar constitui uma das explicações mais fortes do abandono escolar, sendo um fenómeno multidimensional cujos diferentes factores explicativos são interdependentes. Para além dos factores individuais, diferentes estudos tornaram evidente a relação que existe entre certas características familiares e o risco de abandono escolar: nível socioeconómico, apoio parental, compromisso, supervisão, valores e expectativas escolares. o presente artigo visa particularmente o estudo das percepções dos alunos em relação aos diferentes aspectos inerentes ao meio familiar, à escola e aos diferentes factores de risco associados aos jovens durante o período de transição básico-secundário. Trata-se igualmente de ver como estes diferentes factores se influenciam mutuamente durante um determinado período escolar, bem como de modo longitudinal ao longo de três anos escolares. recorremos a um modelo de pistas causais para predizer o risco de abandono escolar à partida em função dos diferentes factores medidos. os resultados tornam evidente o papel central desempenhado por três variáveis individuais na explicação directa e indirecta dos nossos critérios: o sentimento dos jovens em relação à escola e à sua escolaridade, bem como os resultados escolares. considerando os nossos resultados, resulta que o comportamento social, os métodos de trabalho e a integração social intervêm de modo significativo no processo de abandono escolar.
-
L’influence des définitions des habiletés disciplinaires sur la création et le choix d’items dans le PISA et le TEIMS
Diane Leduc, Martin Riopel, Gilles Raîche et Jean-Guy Blais
p. 97–129
RésuméFR :
Ce texte vise à comparer les définitions des habiletés disciplinaires présentées dans les documents de références des deux grandes enquêtes internationales suivantes : les Tendances de l’enquête internationale sur les mathématiques et les sciences (TEIMS) et le Programme international pour le suivi des acquis des élèves (PISA) et à voir si leurs différences ont une influence sur la création et le choix des items dans ces mêmes enquêtes. Notre intérêt se porte sur la perspective, ainsi que sur l’esprit qui orientent la construction de ces évaluations et qui résultent d’un consensus entre les États1 participants. Nous exposerons la visée du TEIMS et du PISA avant de résumer leur structure respective et avant de présenter plus en détail les définitions, les dimensions des habiletés disciplinaires ainsi que la création et le choix des items.
EN :
This paper aims to compare the various definitions of disciplinary skills and to see if their differences have an influence on the creation and the choice of items in two international investigations: the Trends in International Mathematics and Science Study (TIMSS) and Program for International Student Assessment (PISA). Thus, our interest focuses on the perspective and the philosophical orientation that guide the construction of these evaluations and which results from a consensus among the participating countries. We will introduce the aims of the TIMSS and PISA before summarizing their respective structure and presenting in more details their respective definitions of disciplinary skills as well as their item development and choices.
PT :
Este artigo visa comparar as definições das competências disciplinares apresentadas nos documentos de referência de dois grandes inquéritos internacionais: Trends in International Mathematics and Science Study (TIMSS) e Program for International Student Assessment (PISA). Pretende-se ver se as diferenças entre estes dois inquéritos internacionais têm influência na criação e na escolha dos itens respectivos. O nosso interesse incide sobre a perspectiva e o espírito que orientam a construção destas avaliações e que resultam de um consenso entre os Estados participantes. Apresentaremos os objectivos do TIMSS e do PISA antes de resumir a estrutura respectiva e antes de apresentar mais em detalhe as definições, as dimensões das competências disciplinares, bem como a criação e a escolha dos itens.