Résumés
Résumé
Cette étude propose d’analyser les dossiers académiques, qui cumulent les crédits mérités dans le cadre d’un programme, afin de déterminer si les notes, obtenues durant les cours associés à la formation, permettent de porter un jugement valide sur le développement des compétences attendues. Le concept de validité de construit curriculaire est introduit afin de qualifier le jugement qui sera porté à cet effet. Des analyses factorielles confirmatoires permettent de confronter la struc - turation Cours-Compétences sous-jacente au programme avec l’empirie, ce qui permet de valider les jugements énoncés. Les analyses portent sur les dossiers académiques de 164 finissantes et finissants du programme d’enseignement secondaire d’une université québécoise, diplômés entre 2002 et 2010. Les résultats confirment que les évaluations se structurent en fonction de quatre groupes de compétences liés aux fondements de l’éducation, à l’acte d’enseigner, aux aspects sociaux et au développement de l’identité professionnelle. Les avantages et les limites de cette analyse sont discutés.
Mots-clés :
- évaluation,
- compétences,
- validité de construit curriculaire,
- analyse facto rielle confirmatoire,
- éducation
Abstract
This study proposes to analyse the student’s academic records that currently hold the credits gathered from the program framework, to determine if the grades, inherited from the courses, allows a valid judgment about the competences developed at the end of the curriculum. The concept of curricular construct validity is introduced to qualify the judgment that will be issued. Confirmatory factorial analyses allow confronting the theoretical Course-Competencies mapping against the empirical data in order to validate the judgments issued. The analyses were conducted on 164 students from a university located in the province of Québec, who graduated from a secondary teaching program between 2002 and 2010. The results confirm that the evaluations are structured into four groups of competencies: educational foundations, teaching acts, social aspects and professional identity. Advantages and limits of this analysis will be discussed.
Keywords:
- evaluation,
- competencies,
- curriculum,
- confirmatory factor analysis,
- education
Resumo
Este estudo propõe-se analisar os dossiês académicos, que reúnem os créditos adquiridos no quadro de um programa, para determinar se as notas, obtidas durante os cursos associados à formação, permitem formular um juízo válido sobre o desenvolvimento das competências esperadas. O conceito de validade do construído curricular é introduzido para qualificar a formulação deste juízo. As análises fatoriais confirmatórias permitem confrontar a estruturação Curso- Competências subjacentes ao programa com a empiria, o que permite validar os juízos enunciados. As análises incidem sobre os dossiês académicos de 164 finalistas do programa de ensino secundário de uma universidade do Quebeque, diplomados entre 2002 e 2010. Os resultados confirmam que as avaliações se estruturam em função de quatro grupos de competências ligados aos fundamentos da educação, ao ato de ensinar, aos aspetos sociais e ao desenvolvimento da identidade profissional. As vantagens e os limites desta análise são discutidas.
Palavras chaves:
- avaliação,
- competências,
- validade do construído escolar,
- análise fatorial confirmatória,
- educação
Parties annexes
Références
- American Educational Research Association (AERA) (1999). Standards for educational and psychological testing. Washington, DC: american educational research association.
- Begin, C., & Guay, F. (2010). Validation de l’échelle de motivation à l’égard de l’orthographe (EMO). Mesure et évaluation en éducation, 33 (1), 63-78.
- Bodin, A. (2006). Un point de vue sur Pisa. Gazette des mathématiciens, 108, 54-59.
- Brown, T. A. (2006). Confirmatory factor analysis for applied research. New York: Guilford Press.
- Bureau du recensement étudiant et de la recherche institutionnelle de l’université du Québec (BRERIUQ) (2000a). Enquête auprès des premiers diplômés et diplômées du baccalauréat en enseignement secondaire. Québec, Qc: Université du Québec.
- Bureau du recensement étudiant et de la recherche institutionnelle de l’Université du Québec (BRERIUQ) (2000b). Enquête auprès des employeurs des premiers diplômés et diplômées du baccalauréat en enseignement secondaire. Quebec, Qc: universite du Quebec.
- Buysse, A. A. J. (2012). Portfolio de developpement professionnel et certification: Frictions constructives ou destructives. Le bulletin de l’ADMEE-Europe, 2012 (1), 25-39.
- Cardin, J. F., & Couture, C. (2006). La refonte du programme du baccalaureat en éducation préscolaire et en enseignement primaire. In C. Gauthier & M. Mellouki (eds.), La formation des enseignants au Québec à la croisée des chemins (pp. 121-160). Québec, Qc: les Presses de l’Université laval.
- Castillo, C., Leonardo, M., Cheniaux, E., & Landeira-Fernandez, J. (2010). Psychometric properties and latent structure of the portuguese version of the Penn state worry questionnaire. The Spanish Journal of Psychology, 13 (1), 431-443.
- Chen, Y.-H., Rendina-Gobioff, G., & Dedrick, R. F. (2010). Factorial invariance of a chinese self-esteem scale for third and sixth grade students: evaluating method effects associated with positively and negatively worded items. The International Journal of Educational and Psychological Assessment, 6 (1), 21-35.
- Chevrier, J., Gohier, C., Anadon, M., & Godbout, S. (2007). Construction de l’identité professionnelle des futures enseignantes: dispositifs de formation présents et souhaités selon les acteurs responsables de la formation des maitres au préscolaire et au primaire. In C. Gohier (ed.), Identités professionnelles d’acteurs de l’enseignement: Regards croisés (pp. 137-168). Québec, Qc: Presses de l’Université du Québec.
- Comite d’agrement des programmes de formation a l’enseignement (CAPFE)(2010). La visite de suivi de l’agrément d’un programme de formation à l’enseignement: Cadre de référence et modalités d’application pour les visites de suivi de l’agrément qui seront effectuées entre 2010 et 2013. Gouvernement du Québec, Qc: Ministère de l’éducation, du loisir et du sport.
- De Ketele, J.-M., & Gerard, F.-M. (2005). La validation des épreuves d’évaluation selon l’approche par les compétences. Mesure et évaluation en éducation, 28 (3), 1-26.
- Desjardins, J., & Dezetter, O. (2009). Développer des compétences professionnelles en formation initiale à l’enseignement préscolaire et primaire: regard sur l’organisation des programmes en contexte québécois. Canadian Journal of Education, 32 (4), 873-902.
- Gauthier, C., & Mellouki, M. (2006). La formation des enseignants au Québec à la croisée des chemins. Québec, Qc: Les Presses de l’Université Laval.
- George, D., & Mallery, P. (2003). SPSS for Windows step by step: A simple guide and reference, 11.0 update (4th ed.). Boston, Ma: allyn & Bacon.
- Harvey, L. (2011). Hidden Markov models and learning in authentic situations. Tutorials in Quantitative Methods for Psychology, 7 (2), 32-41.
- Harvey, L. (2009). L’échafaudage lors de la supervision en milieu professionnel: étude des modalités et un modèle. Mesure et évaluation en éducation, 32 (1), 55-83.
- Harvey, L., & Barras, D. (2008). Transfert des compétences et construction d’un langage d’action en situation de compagnonnage professionnels en soins infirmiers. Revue des sciences de l’éducation, 34 (3), 665-687.
- Harvey, L., & Laroui, R. (2006). L’élaboration des nouveaux programmes de formation à l’enseignement secondaire: enjeux et défis. In C. Gauthier & M. Mellouki (eds.), La formation des enseignants au Québec à la croisée des chemins (pp. 237-252). Québec, Qc: les Presses de l’Université Laval.
- Helie, S. (2006). An introduction to model selection: tools and algorithms. Tutorials in Quantitative Methods for Psychology, 2 (1), 1-10.
- Issaieva, E., & Crahay, M. (2010). Conceptions de l’évaluation scolaire des élèves et des enseignants: validation d’échelles et étude de leurs relations. Mesure et évaluation en éducation, 33 (1), 31-61.
- Jonnaert, P., Barrette, J., Boufrahi, S., & Masciotra, D. (2004). Contribution critique au développement des programmes d’études: compétences, constructivisme et interdisciplinarité. Revue des sciences de l’éducation, 30, 667-696.
- Jorro, A. (2009). La reconnaissance professionnelle: évaluer, valoriser, légitimer. Ottawa, on: Presses de l’Université d’Ottawa.
- Louis, R., Jutras, F., & Hensler, H. (1996). Des objectifs aux compétences, l’évaluation de la formation initiale des maitres. Revue canadienne de l’éducation, 21 (4), 414-432.
- McCoach, D. B., & Black, A. C. (2008). Evaluation of model fit and adequacy. in A. A. O’Connell & D. B. Mccoach (eds.), Multilevel modeling of educational data (pp. 245-273) . Greenwich: information age Publishing inc.
- Minier, P. (2006). Nouveaux programmes de formation à l’enseignement secondaire. In C. Gauthier & M. Mellouki (eds.), La formation des enseignants au Québec à la croisée des chemins (pp. 191-220). Québec, Qc: les Presses de l’Université Laval.
- Ministère de l’éducation du Québec (MEQ) (2001). La formation à l’enseignement: Les orientations, les compétences professionnelles. Québec, Qc: Gouvernement du Québec.
- Ministere de l’éducation, du loisir et du sport (MELS) (2006). Le stage probatoire des enseignants et des enseignantes du préscolaire, du primaire et du secondaire: Document d’information. Gouvernement du Québec, Qc: Ministère de l’education, du loisir et du sport.
- Portelance, I. (2007). Une vision partagée de la formation à l’enseignement. In L. Belair, D. Laveault, & C. Lebel (eds.), Les compétences professionnelles en enseignement et leur évaluation (pp. 197-212). Ottawa, on: Presses de l’Université d’Ottawa.
- Pregent, R., Bernard, H., & Kozanitis, A. (2009). Enseigner à l’université dans une approche-programme: Un défi à relever. Montréal, Qc: Presses internationales Polytechnique.
- Ryan, K. E., & Cousins, J. B. (2009). Introduction. In K. Ryan & J. B. Cousins (eds.), The Sage international handbook of educational evaluation (pp. ix-xvii). Los Angeles, Ca: sage.
- Scallon, G. (2004). L’évaluation des apprentissages dans une approche par compétences. Bruxelles: de Boeck.
- Wholey, J. S., Hatry, H. P., & Newcomer, K. E. (2010). Handbook of practical program evaluation (Third edition). San Francisco, Ca: Jossey-Bass.