标题：Developing a dashboard to meet the needs of residents in a competency-based training program: A design-based research project
其他标题：Créer un tableau de bord permettant de répondre aux besoins des
résidents d’un programme de formation fondé sur les compétences :
projet de recherche basé sur la conception
摘要：Background : Canadian specialty programs are implementing Competence By Design, a competency-based medical education (CBME) program which requires frequent assessments of entrustable professional activities. To be used for learning, the large amount of assessment data needs to be interpreted by residents, but little work has been done to determine how visualizing and interacting with this data can be supported. Within the University of Saskatchewan emergency medicine residency program, we sought to determine how our residents’ CBME assessment data should be presented to support their learning and to develop a dashboard that meets our residents’ needs. Methods: We utilized a design-based research process to identify and address resident needs surrounding the presentation of their assessment data. Data was collected within the emergency medicine residency program at the University of Saskatchewan via four resident focus groups held over 10 months. Focus group discussions were analyzed using a grounded theory approach to identify resident needs. This guided the development of a dashboard which contained elements (data, analytics, and visualizations) that support their interpretation of the data. The identified needs are described using quotes from the focus groups as well as visualizations of the dashboard elements. Results: Resident needs were classified under three themes: (1) Provide guidance through the assessment program, (2) Present workplace-based assessment data, and (3) Present other assessment data. Seventeen dashboard elements were designed to address these needs. Conclusions: Our design-based research process identified resident needs and developed dashboard elements to meet them. This work will inform the creation and evolution of CBME assessment dashboards designed to support resident learning.
其他摘要：Contexte : Les programmes canadiens de spécialité sont à implanter la compétence par conception (CPC), un
programme d’éducation médicale par compétences qui nécessite des évaluations fréquentes des activités
professionnelles confiables. Pour servir aux fins d’apprentissage, la grande quantité de données d’évaluation doit
être interprétée par les résidents, mais peu de travaux ont été réalisés pour déterminer comment la visualisation et
l’interaction avec ces données peuvent être soutenues. Dans le cadre du programme de résidence en médecine
d’urgence de l’Université de Saskatchewan, nous avons cherché à déterminer comment les données d’évaluation de
la CPC de nos résidents devraient être présentées pour soutenir leur apprentissage et pour développer un tableau
de bord qui réponde aux besoins de nos résidents.
Méthodologie : Nous avons utilisé un processus de recherche orientée par la conception pour cerner les besoins des
résidents en lien avec la présentation de leurs données d’évaluation. Les données ont été recueillies au cours du
programme de résidence en médecine d’urgence de l’Université de Saskatchewan grâce à quatre groupes de
discussion de résidents qui se sont tenus sur une période de 10 mois. Les groupes de discussion ont été analysés en
utilisant l’approche de la théorisation ancrée (Grounded Theory) pour cerner les besoins des résidents, pour guider
le développement d’un tableau de bord contenant des éléments (données, analyses et visualisations) qui
soutiennent leur interprétation de leurs propres données. Les besoins identifiés sont décrits à l’aide de citations des
groupes de discussion ainsi que de visualisations des éléments du tableau de bord.
Résultats : Les besoins des résidents ont été classés sous trois thèmes : 1. être guidés quant au programme
d'évaluation, 2. présenter des données d’évaluation en milieu de travail, et 3. présenter d’autres données
d’évaluation. Dix-sept éléments du tableau de bord ont été conçus pour répondre à ces besoins.
Conclusions : Notre méthode de recherche orientée par conception a permis de cerner les besoins des résidents et
d’élaborer les éléments d’un tableau de bord pour y répondre. Ce travail servira de base à la création et à l’évolution
des tableaux de bord d’évaluation en CPC conçus pour soutenir l’apprentissage des résidents.
