Evaluating facilitator adherence to a newly adopted simulation debriefing framework Évaluation de l’adhésion du facilitateur à un cadre de débriefing de simulation nouvellement adopté

Abstract

Background: Post-simulation debriefing is a critical component of the learning process for simulation based medical education, and multiple frameworks have been established in an attempt to maximize learning during debriefing through guided reflection. This study developed and applied a rubric to measure facilitator adherence to the newly adopted Promoting Excellence and Reflective Learning in Simulation (PEARLS) debriefing framework to evaluate the efficacy of current faculty development.

Methods: A retrospective review of 187 videos using a structured 13-behavior rubric based on the PEARLS debriefing model was conducted of facilitator-learner debriefings following a simulated clinical encounter for medical students. The aggregate results were used to describe common patterns of debriefing and focus future faculty development efforts.

Results: In total, 187 debriefings facilitated by 32 different facilitators were analyzed. Average scores for each of the 13 PEARLS framework behaviors ranged from 0.04 to 0.971. Seven items had an average of ≥ 0.77, ten averaged > 0.60 and two averaged < 0.20.

Conclusions: Faculty adhered to some behaviors elicited by the PEARLS model more consistently than others. These results suggest that faculty facilitators are more likely to adhere to frameworks that focus on educational behaviors and less likely to adhere to organizational or methodological frameworks.

Résumé

Contexte : Le débriefing post-simulation est une composante essentielle du processus d'apprentissage dans le cadre de la formation médicale par simulation, et de nombreux cadres ont été établis pour tenter de maximiser l'apprentissage au cours du débriefing par le biais d'une réflexion guidée. Cette étude a développé et appliqué une grille afin de mesurer l'adhésion des facilitateurs au cadre de débriefing PEARLS (Promoting Excellence and Reflective Learning in Simulation), récemment adopté afin d'évaluer l'efficacité de la formation professorale actuelle.

Méthodes : Un examen rétrospectif de 187 vidéos utilisant une grille structurée contenant 13 comportements basée sur le modèle de débriefing PEARLS a été mené sur les débriefings facilitateur-apprenant après une rencontre clinique simulée pour des étudiants en médecine. Les résultats agrégés ont été utilisés pour décrire les schémas communs de débriefing et concentrer les futurs efforts de développement de la faculté.

Résultats : Au total, 187 débriefings animés par 32 facilitateurs différents ont été analysés. Les scores moyens pour chacun des 13 comportements du cadre PEARLS allaient de 0,04 à 0,971. Sept éléments avaient une moyenne ≥ 0,77, dix avaient une moyenne > 0,60 et deux avaient une moyenne < 0,20.

Conclusions : Le corps professoral a adhéré à certains comportements encouragés par le modèle PEARLS de manière plus systématique que d'autres. Ces résultats suggèrent que les facilitateurs issus du corps professoral sont plus susceptibles d'adhérer à des cadres qui se concentrent sur les comportements éducationnels et moins susceptibles d'adhérer à des cadres organisationnels ou méthodologiques.