FR:

Cet article s’inscrit dans le contexte des débats concernant la mission des universités et l’évaluation de leur performance. Il a pour objectif d’illustrer le recours au processus d’anasynthèse comme moyen de valider une typologie des conceptions des universités élaborée en vue d’évaluer leur performance. L’anasynthèse, terme formé des mots analyse et synthèse désignant le processus général de développement de modèles suggéré par Silvern en 1972, s’articule autour des étapes suivantes : l’analyse d’une situation de départ, l’élaboration d’une synthèse à partir de cette analyse, la formulation d’un prototype de modèle, la simulation ou validation de ce prototype en vue finalement de la formulation d’un modèle optimal. L’originalité de cette recherche et son apport à l’avancement des connaissances résident notamment dans le fait d’adapter l’anasynthèse à une validation rigoureuse et systématique d’un référentiel d’évaluation de l’enseignement supérieur. Tout en étant susceptible d’aider à la prise de décision en gestion, la typologie originale qui s’en est dégagée pourra servir de fondements à des recherches subséquentes propres à l’élaboration d’un modèle complet d’évaluation de la performance des universités.

EN:

This article is in the context of debates about the mission of universities and assessment of their performance. Its main purpose is to illustrate the use of the anasynthesis process as a means of validation of a typology of conceptions of universities developed to assess their performance. Anasynthesis, term coined from the words analysis and synthesis designating the general process of elaboration of models suggested by Silvern in 1972, is based on the following steps: the analysis of a baseline, the development of a synthesis from this analysis, the formulation of a prototype model, the simulation or validation of this prototype to finally reach the formulation of an optimal model. The originality of this research and its contribution to the advancement of knowledge reside particularly in the adaptation of anasynthesis to a rigorous and systematic assessment list for evaluating higher education. While susceptible to serve as an aid to decision-making in management, the original typology generated can serve as a basis for further research specific to the development of a comprehensive evaluation model regarding performance of universities.

PT:

Este artigo inscreve-se no contexto dos debates relativos à missão das universidades e à avaliação do seu desempenho. Tem por objetivo ilustrar o recurso ao processo de anassíntese como meio de validar uma tipologia de conceções de universidades elaborada para avaliar o seu desempenho. A anassíntese, termo formado pelas palavras análise e síntese que designa o processo geral de desenvolvimento de modelos sugerido por Silvern em 1972, articula-se em torno das seguintes etapas: a análise de uma situação de partida, a elaboração de uma síntese a partir desta análise, a formulação de um protótipo de modelo, a simulação ou validação deste protótipo e, finalmente, a formulação de um modelo ideal. A originalidade desta investigação e o contributo para o avanço do conhecimento residem, nomeadamente, no facto de adaptar a anassíntese a uma validação rigorosa e sistemática de um referencial de avaliação do ensino superior. Sendo suscetível de ajudar à tomada de decisão em gestão, a tipologia original que se desenvolveu poderá servir, ainda, de fundamento às investigações subsequentes adequadas à elaboração de um modelo completo de avaliação do desempenho das universidades.

FR:

Cet article examine un dispositif d’évaluation des enseignements par les étudiants (EEE) en analysant les choix des équipes pédagogiques concernant les questionnaires qu’elles conçoivent. Cette étude est menée afin d’étudier la place possible de l’EEE dans le cadre de l’évaluation-conseil. En effet, pour que l’EEE soit utile aux enseignants, il convient que les questions posées aux étudiants permettent aux enseignants comme aux professionnels de l’accompagnement de s’inscrire dans une logique d’évaluation-conseil. Les résultats montrent leur intérêt dans ce cadre en fournissant aux enseignants des données qui leur permettent de conforter ou de modifier leurs enseignements. Ils soulignent également l’absence de recueil de données en lien avec certaines dimensions de la relation pédagogique (notamment les difficultés étudiantes et les interactions enseignant-étudiant), ce qui pose la question de la perception de l’enseignement chez les enseignants-chercheurs en France.

EN:

This article attempts to investigate a system of the teaching evaluation by students focusing on the choice of items made of teaching staff when designing the evaluation questionnaire. The purpose of this research is to study whether results of student evaluation of programmes may be used to ground professional advice to teachers. Items surveyed in the evaluation questionnaire should be selected specifically for the scheme to provide results on which to build advisory expertise for improvement of teaching practices. The results show which items provide useful information for teaching teams. They also highlight the absence of a series of items concerning student learning problems and teacher-learner relationships that questions the perception of teaching by academics in France.

PT:

Este artigo examina um dispositivo de avaliação do ensino pelos estudantes (AEE), analisando as opções das equipas pedagógicas na conceção dos questionários. O seu propósito é estudar o possível lugar da AEE no quadro da avaliação-conselho. Com efeito, para que AEE seja útil aos professores, convém que as questões colocadas aos estudantes permitam, tanto aos professores como aos profissionais de acompanhamento, a adoção de uma lógica de avaliação-conselho. Neste quadro, os resultados revelam interesse, fornecendo aos professores dados que lhes permitem confortar ou modificar o seu ensino, e sublinham, igualmente, a ausência de recolha de dados em articulação com certas dimensões da relação pedagógica (nomeadamente as dificuldades dos estudantes e as interações aprendente-professor), o que coloca a questão da perceção do ensino entre os professores-investigadores em França.

FR:

La méthode du score de propension devient de plus en plus populaire pour estimer les effets causaux d’un programme d’intervention. Si les applications empiriques de cette méthode sont encore rares dans les recherches en éducation, des exemples de son utilisation se trouvent aisément dans d’autres disciplines. Cependant, sa mise en place soulève plusieurs questions. L’objectif de cet article est de fournir des éléments de réponses guidant le chercheur et l’évaluateur du domaine de l’éducation pour l’estimation et l’utilisation du score de propension. Les différentes étapes de son application sont présentées pas à pas : évaluation du biais de sélection, construction du score de propension et mesure de sa qualité, et choix des stratégies d’utilisation du score dans l’estimation des effets d’un traitement. Les questions méthodologiques soulevées sont discutées à chaque étape. Pour faciliter la compréhension, un exemple d’une expérimentation en maternelle illustre la méthode.

EN:

Propensity score methods become increasingly popular for estimating the causal effects of an intervention. If empirical applications of this method are still unusual in education researches, examples can be found easily in other fields. However, its implementation raises several questions. The aim of this paper is to provide guidance to educational researchers regarding the estimation and the utilization of the propensity score. The various stages of its application are presented step by step: evaluation of the selection bias, construction of the propensity score and measurement of its quality, and decision on the strategies to use in the estimation of treatment effects. Methodological issues are discussed at each stage. To facilitate the understanding, an example of an experiment in kindergarten illustrates the method.

PT:

O método da pontuação de propensão está tornar-se cada vez mais popular para estimar os efeitos causais de um programa de intervenção. Embora as aplicações empíricas deste método ainda sejam raras na investigação em educação, exemplos do seu uso podem ser facilmente encontrados noutras disciplinas. No entanto, a sua implementação levanta diversas questões. O objetivo deste artigo é fornecer algumas respostas para orientar o investigador e o avaliador do domínio da educação para a estimativa e uso da pontuação de propensão. As diferentes etapas da sua aplicação são apresentadas passo a passo: avaliação do viés de seleção, construção da pontuação de propensão e medição da sua qualidade e escolha das estratégias para o uso da pontuação na estimativa dos efeitos do tratamento. As questões metodológicas são discutidas em cada etapa. Para facilitar o entendimento, um exemplo de uma experiência no jardim-de-infância ilustra o método.

FR:

Plusieurs recherches ont mis en évidence, chez des élèves ou des professeurs, différentes formes de rejet de la théorie de l’évolution ainsi que la perception de différentes formes d’interactions entre science et croyances religieuses. C’est pourquoi un questionnaire permettant d’étudier la manière dont les élèves situent, l’un par rapport à l’autre, le registre de la science et celui des croyances religieuses a été élaboré, sur base d’un modèle théorique (Wolfs, 2013 : Wolfs, Salamon, De Coster, El Boudamoussi, & Jackson, 2008) distinguant six conceptions-types : le « rejet de la science au nom de conceptions fidéistes », le « concordisme classique », le « concordisme inversé », « l’autonomie de la science », la « complémentarité » et les « critiques rationalistes à l’égard de croyances religieuses ». Après avoir présenté le cadre théorique et les modalités de construction du questionnaire, cet article examine sa validité de construit et la consistance interne de ses dimensions, à partir des réponses fournies par 638 élèves de dernière année de l’enseignement secondaire belge francophone. Une structure factorielle globalement cohérente avec le modèle de référence a été dégagée au terme d’une analyse factorielle confirmatoire. En outre, ses différentes dimensions s’avèrent être consistantes (alpha de Cronbach). La pertinence de cet outil pour traiter une problématique éducative pour laquelle il en existe très peu est ensuite discutée.

EN:

Research has pointed out that school teachers and students sometimes apply several forms of rejection of evolution theory and, also, that they perceive various forms of interaction between scientific knowledge and religious beliefs. To further explore these interactions, we have built a questionnaire enabling us to study the way students position scientific knowledge compared to religious beliefs, and vice versa, based on a theoretical model (Wolfs, 2013 : Wolfs, Salamon, De Coster, El Boudamoussi, & Jackson, 2008) describing six different conceptions: «rejection of science in the name of fideist conceptions», «classic concordism», «reversed concordism», «scientific autonomy», «complementarity» and «rationalist critiques of religious beliefs». In this paper, after presenting the theoretical frame and methodology underlying the construction of the questionnaire, we tested its construct validity and the internal consistence of its dimensions based on data collected from 638 undergraduate French speaking Belgian students in their last year of compulsory school education. The results obtained through confirmatory factor analysis and by Chronbach’s alpha analysis are consistent with our theoretical model. Thus we discuss the relevance of this questionnaire, intended to examine an educational issue for which very few investigation tools exist.

PT:

Várias investigações evidenciaram, nos alunos ou nos professores, diferentes formas de rejeição da teoria da evolução e de interação entre a ciência e as crenças religiosas. Por isso, foi elaborado um questionário para estudar o modo como os alunos se posicionam perante a relação entre o registo da ciência e as crenças religiosas e vice-versa, tendo por base um modelo teórico (Wolfs, 2013 : Wolfs, Salamon, De Coster, El Boudamoussi, & Jackson, 2008) que distingue seis tipos de conceções: a “rejeição da ciência em nome das conceções fideístas”, o “concordismo clássico”, o “concordismo invertido”, “a autonomia da ciência”, a “complementaridade” e as “críticas racionalistas relativamente às crenças religiosas”. Depois da apresentação do quadro teórico e das modalidades de construção do questionário, este artigo examina a validade do construto e a consistência interna das suas dimensões, a partir das respostas fornecidas por 638 alunos do último ano do ensino secundário belga francófono. Os resultados obtidos a partir de uma análise fatorial confirmatória e da análise do alfa de Cronbach são consistentes com o modelo teórico de referência. Discute-se, por fim, a pertinência deste questionário para tratar uma problemática educativa, para a qual existem poucas ferramentas de investigação.