Résumés
Résumé
Cette recherche porte sur l’évaluation de l’efficacité d’une formation en milieu hospitalier à partir d’indicateurs de taille d’effet et d’indice d’hétérogénéité. L’évaluation portait sur une formation en soins intermédiaires destinée aux infirmières et infirmiers d’une durée de 23 jours et qui intégrait notamment trois jours d’enseignement clinique au chevet du patient. Les compétences ont été mesurées en début et en fin de formation, à partir d’une grille d’observation standardisée basée sur les rôles d’expert clinique, de communicateur, de collaborateur, de manager et d’apprenant-formateur. Les estimateurs de Cohen et de Glass ont démontré des effets significatifs de la formation sur les cinq domaines, tandis que l’indice d’hétérogénéité a mis en évidence une réduction des disparités de comportements au sein du groupe au terme de la formation. La discussion aborde la question des balises utilisées pour interpréter les tailles d’effet.
Mots-clés :
- formation en soins infirmiers,
- soins intermédiaires,
- évaluation des compétences,
- taille d’effet,
- indice d’hétérogénéité
Abstract
This research focuses on evaluating the effectiveness of a training course in a hospital setting, using indicators of effect size and heterogeneity index. The evaluation focused on a training course in intermediate care for nurses. The course lasted 23 days and included three days of clinical teaching at the patient’s bedside. The skills were measured at the beginning and end of the training course, using an observation grid based on five competency domains: clinical expert, communicator, collaborator, leader and learner-trainer. Cohen’s and Glass’s estimators demonstrated significant effects of training on the five domains, while the heterogeneity index showed a reduction in behavioral disparities within the nursing group at the end of the training course. The discussion addresses the issues about the boundaries used to interpret effect sizes.
Keywords:
- nursing education and training,
- intermediate care,
- competency assessment,
- effect size,
- heterogeneity index
Resumo
Esta investigação trata da avaliação da eficácia da formação em ambiente hospitalar por meio de indicadores de tamanho do efeito e de índice de heterogeneidade. A avaliação abrangeu um curso de formação em cuidados intermediários destinado às enfermeiras e aos enfermeiros com uma duração de 23 dias e que incluiu três dias de ensino clínico realizado à cabeceira do paciente. As competências foram medidas no início e no final da formação, a partir de uma grelha de observação padronizada com base nas funções de especialista clínico, de comunicador, de colaborador, de gestor e de aprendiz-formador. Os estimadores de Cohen e Glass demonstraram efeitos significativos da formação em todos os cinco domínios, enquanto o Índice de heterogeneidade evidenciou uma redução das disparidades comportamentais dentro do grupo após a conclusão da formação. A discussão aborda a questão das marcas utilizadas para interpretar os tamanhos do efeito.
Palavras chaves:
- formação em enfermagem,
- cuidados intermediários,
- avaliação de competências,
- tamanho do efeito,
- índice de heterogeneidade
Parties annexes
Références
- Alhassan, M. (2019). Effect of a 2-day communication skills training on nursing and midwifery students’ empathy: A randomised controlled trial. BMJ Open, 9, 1-8. doi : 10.1136/bmjopen-2018-023666
- Amiri, M., Khademian, Z., & Nikandish, R. (2018). The effect of nurse empowerment educational program on patient safety culture: A randomized controlled trial. BMC Medical Education, 18(1), 158. doi : 10.1186/s12909-018-1255-6
- Baartman, L. K. J., & de Bruijn, E. (2011). Integrating knowledge, skills and attitudes: Conceptualising learning processes towards vocational competence. Educational Research Review, 6(2), 125-134. doi : 10.1016/j.edurev.2011.03.001
- Barry, A. E., Szucs, L. E., Reyes, J. V., Ji, Q., Wilson, K. L., & Thompson, B. (2016). Failure to report effect sizes: The handling of quantitative results in published health education and behavior research. Health Education & Behavior, 43(5), 518-527. doi : 10.1177/1090198116669521
- Blume, B., Ford, J., Baldwin, T., & Huang, J. (2010). Transfer of training: A meta-analytic review. Journal of Management, 36, 1065-1105. doi : 10.1177/0149206309352880
- Burke, L. A., & Hutchins, H. M. (2007). Training transfer: An integrative literature review. Human Resource Development Review, 6(3), 263-296. doi : 10.1177/1534484307303035
- Cohen, J. (1992). A power primer. Psychological Bulletin, 112(1), 155-159. doi : 10.1037//0033-2909.112.1.155
- Coulet, J.-C. (2016). Les notions de compétence et de compétences clés : l’éclairage d’un modèle théorique fondé sur l’analyse de l’activité. Activités, 13(1). doi : 10.4000/activites.2745
- Ford, J. K., Baldwin, T. T., & Prasad, J. (2018). Transfer of training: The known and the unknown. Annual Review of Organizational Psychology and Organizational Behavior, 5(1), 201-225. doi : 10.1146/annurev-orgpsych-032117-104443
- Foucher, R. (2010). Gérer les talents et les compétences : principes, pratiques, instruments. Montréal, QC : Éd. Nouvelles.
- Frank, J. R., & Danoff, D. (2007). The CanMEDS initiative : Implementing an outcomes-based framework of physician competencies. Medical Teacher, 29(7), 642-647. doi : 10.1080/01421590701746983
- Fröhlich, M., Emrich, E., Pieter, A., & Stark, R. (2009). Outcome effects and effects sizes in sport sciences. International Journal of Sports Science and Engineering, 3(3), 175-179. Retrieved from https://www.researchgate.net/publication/233894385_Outcome_effects_and_effects_sizes_in_sport_sciences
- Gentizon, J., Kottelat, Y., Hamel-Lauzon, G., Szostak, V. et Gallant, S. (2019). Le savoir au service des patients : évaluation du transfert des connaissances auprès d’infirmiers-ères, après une formation e-Learning sur la gestion de la douleur. Science infirmière et pratiques en santé, 2(1), art. 4. doi : 10.31770/2561-7516.1028
- Gérard, F.-M. (2003). L’évaluation de l’efficacité d’une formation. Gestion 2000, 20(3), 13-33. Repéré à http://www.fmgerard.be/textes/Outil.pdf
- Gérard, F.-M. (2007, avril). La complexité d’une évaluation des compétences à travers des situations complexes : nécessités théoriques et exigences du terrain, Actes du Colloque international de l’ORÉ, Montréal, QC.
- Glass, G. V., McGaw, B., & Lee Smith, M. (1981). Meta-analysis in social research. Newbury Park, CA : SAGE.
- Hattie, J. (2017). L’apprentissage visible pour les enseignants. Québec, QC : PUQ.
- Hedges, L. V. (1981). Distribution theory for Glass’s estimator of effect size and related estimators. Journal of Educational Statistics, 6(2), 107-128. doi : 10.2307/1164588
- Institut für Medizin und Kommunikation (IMC). (2013). Directives suisses pour la reconnaissance des Unités de soins intermédiaires. Bâle, Suisse : IMC. Repéré à https://swiss-imc.ch/files/daten/richtlinien/NEUES%20Logo_IMC_Richtlinien_2014_Fr_09_190522.pdf
- Kahn, S. et Rey, B. (2016). La notion de compétence : une approche épistémologique. Éducation et francophonie, 44(2), 4-18. doi : 10.7202/1039019ar
- Kirkpatrick, J. D., & Kirkpatrick, W. K. (2016). Kirkpatrick’s four levels of training evaluation. Alexandria, VA : Association for Talent Development.
- Lamont, S., & Brunero, S. (2018). The effect of a workplace violence training program for generalist nurses in the acute hospital setting : A quasi-experimental study. Nurse Education Today, 68, 45-52. doi : 10.1016/j.nedt.2018.05.008
- Lauzier, M. et Denis, D. (2016). Accroître le transfert des apprentissages : vers de nouvelles connaissances, pratiques et expériences. Québec, QC : PUQ.
- Lavina, L., Wehrli, M. et Fumeaux, T. (2017). Entre unité de soins intensifs et unité de lits « standard ». Bulletin des médecins suisses, 98(25), 802-803. Repéré à https://bullmed.ch/journalfile/download/article/ezm_saez/fr/bms.2017.05681/4ae9c577399e2c5f175061678b15d412a9552c16/bms_2017_05681.pdf/rsrc/jf
- Le Boterf, G. (2018). Développer et mettre en oeuvre la compétence : comment investir dans le professionnalisme et les compétences. Paris, France : Eyrolles.
- Ledergerber, C., Mondoux, J. et Sottas, B. (2009). Compétences spécifiques finales pour les filières d’études HES du domaine de la santé. Berne, Suisse : Conférence des recteurs des hautes écoles spécialisées suisses (KFH) et Conférence spécialisée santé (CSS). Repéré à https://www.curaviva.ch/files/DK7NZIW/competences_specifiques_finales_pour_les_filieres_detudes_hes_du_domaine_de_la_sante__kfh_css__2012.pdf
- Maher, J. M., Markey, J. C., & Ebert-May, D. (2013). The other half of the story : Effect size analysis in quantitative research. CBE Life Sciences Education, 12(3), 345-351. doi : 10.1187/cbe.13-04-0082
- Mayen, P. et Métral, J.-F. (2008). Compétences et validation des acquis de l’expérience. Formation emploi : Revue française de sciences sociales, 101, 183-197. Repéré à http://journals.openedition.org/formationemploi/1175
- Mayen, P., Métral, J.-F. et Tourmen, C. (2010). Les situations de travail : références pour les référentiels. Recherche & formation, 64(2), 31-46. Repéré à https://halshs.archives-ouvertes.fr/halshs-01688338/document
- Morrow, C. C., Jarrett, M. Q., & Rupinski, M. T. (1997). An investigation of the effect and economic utility of corporate-wide training. Personnel Psychology, 50(1), 91-119. doi : 10.1111/j.1744-6570.1997.tb00902.x
- Paquay, L., Van Nieuwenhoven, C. et Wouters, P. (2010). L’évaluation, levier du développement professionnel : tensions, dispositifs, perspectives. Bruxelles, Belgique : De Boeck Supérieur.
- Parent, F. (2008). Formation, compétences et constructivisme : le référentiel d’évaluation, outil de cohérence dans les programmes de formation en santé. Dans G. Baillat (dir.), Évaluer pour former : outils, dispositifs et acteurs (pp. 111-139). Louvain-la-Neuve, Belgique : De Boeck Supérieur. Repéré à https://www.cairn.info/evaluer-pour-former-outils-dispositifs-et-acteurs--9782804156619-page-111.htm
- Pentland, D., Forsyth, K., Maciver, D., Walsh, M., Murray, R., Irvine, L., & Sikora, S. (2011). Key characteristics of knowledge transfer and exchange in healthcare : Integrative literature review. Journal of Advanced Nursing, 67(7), 1408-1425. doi : 10.1111/j.1365-2648.2011.05631.x
- Rivard, P. et Lauzier, M. (2013). La gestion de la formation et du développement des ressources humaines : pour préserver et accroître le capital compétence de l’organisation (2e éd.). Québec, QC : PUQ.
- Runciman, W. B., Hunt, T. D., Hannaford, N. A., Hibbert, P. D., Westbrook, J. I., Coiera, E. W., ... et Braithwaite, J. (2012). CareTrack: Assessing the appropriateness of health care delivery in Australia. Medical Journal of Australia, 197(2), 100-105. doi : 10.5694/mja12.10510
- Saks, A. M., & Burke-Smalley, L. A. (2014). Is transfer of training related to firm performance? International Journal of Training and Development, 18(2), 104-115. doi : 10.1111/ijtd.12029
- Sedlmeier, P. (1996). Jenseits des Signifikanztest-Rituals : Ergänzungen und Alternativen. [Beyond the ritual of significance testing : Alternative and supplementary methods]. Methods of Psychological Research Online, 1(4), 41-63. Retrieved from https://www.dgps.de/fachgruppen/methoden/mpr-online/issue1/art3/sedlmeier.pdf
- Siron, S., Dagenais, C., & Ridde, V. (2015). What research tells us about knowledge transfer strategies to improve public health in low-income countries: A scoping review. International Journal of Public Health, 60(7), 849-863. doi : 10.1007/s00038-015-0716-5
- Spurlock, D. (2017). The purpose and power of reporting effect sizes in nursing education research. Journal of Nursing Education, 56(11), 645-647. doi : 10.3928/01484834-20171020-02
- Stander, J., Grimmer, K., & Brink, Y. (2018). Training programmes to improve evidence uptake and utilisation by physiotherapists: A systematic scoping review. BMC Medical Education, 18(1), art. 14. doi : 10.1186/s12909-018-1121-6
- StataCorp. (2013). Stata Statistical Software: Release 13. College Station, TX : StataCorp.
- Streiner, D. L., Norman, G. R., & Cairney, J. (2015). Health measurement scales: A practical guide to their development and use. Oxford, GB : Oxford University Press.
- Tanner-Smith, E. E., & Tipton, E. (2014). Robust variance estimation with dependent effect sizes : Practical considerations including a software tutorial in Stata and SPSS. Research Synthesis Methods, 5(1), 13-30. doi : 10.1002/jrsm.1091
- Thompson, B. (2007). Effect sizes, confidence intervals, and confidence intervals for effect sizes. Psychology in the Schools, 44(5), 423-432. doi : 10.1002/pits.20234
- Tomczak, M., & Tomczak, E. (2014). The need to report effect size estimates revisited : An overview of some recommended measures of effect size. TRENDS in Sport Sciences, 1(21), 19-25. Retrieved from http://www.wbc.poznan.pl/Content/325867/5_Trends_Vol21_2014_%20no1_20.pdf
- Tourmen, C. (2015). L’évaluation des compétences professionnelles : apports croisés de la littérature en évaluation, en éducation et en psychologie du travail. Mesure et évaluation en éducation, 38(2), 111-144. doi : 10.7202/1036765ar
- Yoshinaga, N., Nakamura, Y., Tanoue, H., MacLiam, F., Aoishi, K., & Shiraishi, Y. (2017). Is modified brief assertiveness training for nurses effective? A single-group study with long-term follow-up. Journal of Nursing Management, 26, 59-65. doi : 10.1111/jonm.12521