Mesure et évaluation des compétences en éducation médicale : Regards actuels et prospectifs

Isabelle Raîche, Éric Dionne

Description

Depuis une centaine d’années, des chercheurs ont développé des théories, des modèles et des techniques permettant de mieux mesurer ou observer les apprentissages des étudiants. Le domaine de la pédagogie des sciences de la santé, pour sa part, est le terrain de nombreuses avancées en mesure et évaluation depuis les années 1990. Cependant, le secteur des construits complexes reste à développer, ce qui suscite de nombreux questionnements. Comment mesurer le jugement clinique ? Sur quelles théories édumétriques doit-on s’appuyer pour étudier les instruments de mesure ? Comment automatiser la notation ? Comment s’assurer de la validité des inférences lors de la mesure ou de l’observation du jugement clinique ? Comment mieux comprendre les mécanismes qui permettent de rendre compte du succès d’un programme d’intervention ? C’est à ces questions que le présent ouvrage veut répondre.
Mesure et évaluation des compétences en éducation médicale est le fruit de la 37e conférence de l’Association pour le développement des méthodologies d’évaluation en éducation (ADMÉÉ- Canada), qui s’est tenue à Gatineau (Québec) en novembre 2015. Il fait état des plus récents travaux de chercheurs qui étudient la mesure et l’évaluation dans le domaine de l’éducation médicale et des pédagogies des sciences de la santé, des échanges qui ont découlé de leur présentation et des défis posés par les problématiques évoquées. Il s’adresse autant aux professionnels qu’aux chercheurs et étudiants qui s’intéressent à ces questions.

Sujets

• Ebooks
• Autres

Informations

• Publié par: Presses de l'Université du Québec
• Date de parution: 30 août 2018
• Nombre de lectures: 6
• EAN13: 9782760547988
• Langue: Français
• Poids de l'ouvrage: 5 Mo

Extrait

Sous la direction de Gilles Raîche, Université du Québec à Montréal
La collection Mesure et évaluation soutient la diffusion de recherches et de travaux fonda mentaux, ainsi que de matériel didactique pour les niveaux collégial et universitaire, dans le domaine de la mesure et de l’évaluation en éducation et, plus largement, en sciences humaines.
Les nouveaux enjeux sociétaux et les besoins émergents des milieux de pratique demandent aux intervenants d’être informés des avancées récentes afin de les soutenir dans leur travail. Mesure et évaluation offre aussi aux chercheurs un moyen de partager les résultats de leurs t ravaux avec ces intervenants tout en faisant progresser la recherche, que ce soit en matière de mesure et d’évaluation des apprentissages, de programmes ou encore de méthodologie de recherche.
Les textes publiés sont soumis à un processus d’arbitrage avec le soutien d’évaluateurs externes. La collection Mesure et évaluation souscrit à l’adaptation canadienne-française, par la Revue des sciences de l’éducation , des règles de publication de l’American Psychological Association.
DANS LA MÊME COLLECTION

INTRODUCTION À LA MODÉLISATION D’ÉQUATIONS STRUCTURELLES AMOS dans la recherche en gestion
Lili Zheng, Michel Plaisent, Cataldo Zuccaro et Prosper Bernard
ISBN-978-2-7605-4738-4, 118 pages
CONSTRUIRE DES GRILLES D’ÉVALUATION DESCRIPTIVES AU COLLÉGIAL Guide d’élaboration et exemples de grille
France Côté
ISBN-978-2-7605-4101-6, 192 pages
DES MÉCANISMES POUR ASSURER LA VALIDITÉ DE L’INTERPRÉTATION DE LA MESURE EN ÉDUCATION, Volume 1 – LA MESURE
Sous la direction de Gilles Raîche, Karine Paquette-Côté et David Magis Avec la collaboration de Diane Leduc et d’Hélène Meunier
ISBN-978-2-7605-2685-3, 148 pages
DES MÉCANISMES POUR ASSURER LA VALIDITÉ DE L’INTERPRÉTATION DE LA MESURE EN ÉDUCATION, Volume 2 – L’ÉVALUATION
Sous la direction de Gilles Raîche, Karine Paquette-Côté et David Magis Avec la collaboration de Diane Leduc et d’Hélène Meunier
ISBN-978-2-7605-2687-7, 178 pages
DES MÉCANISMES POUR ASSURER LA VALIDITÉ DE L’INTERPRÉTATION DE LA MESURE EN ÉDUCATION, Volume 3 – ASPECTS PRATIQUES
Sous la direction de Gilles Raîche, Pascal Ndinga et Hélène Meunier
ISBN-978-2-7605-3593-0, 172 pages
Mesure et évaluation des compétences en éducation médicale
Regards actuels et prospectifs
Sous la direction de ERIC DIONNE et ISABELLE RAÎCHE
Presses de l’Université du Québec Le Delta I, 2875, boulevard Laurier, bureau 450, Québec (Québec) G1V 2M2
Téléphone : 418 657-4399
Télécopieur : 418 657-2096
Courriel : [e-mail]
Internet : www.puq.ca



Révision Gislaine Barrette
Correction d’épreuves Mélissa Guay
Conception graphique Richard Hodgson
Image de couverture iStock
Mise en pages et adaptation numérique Studio C1C4

ISBN 978-2-7605-4796-4 ISBN PDF 978-2-7605-4797-1 ISBN EPUB 978-2-7605-4798-8

Dépôt légal : 3 e trimestre 2017 Bibliothèque et Archives nationales du Québec Bibliothèque et Archives Canada © 2017 – Presses de l’Université du Québec Tous droits de reproduction, de traduction et d’adaptation réservés
À ma fille Marianne (9 ans) qui a déjà compris les enjeux de la mesure et de l’évaluation… ! ED À ma famille pour leur soutien inconditionnel… IR
Remerciements
Nous désirons remercier le Centre d’appui pédagogique en santé pour la francophonie (CAPSAF) de la Faculté de médecine de l’Université d’Ottawa pour le soutien financier ayant permis la publication de cet ouvrage.
Liste des figures
FIGURE 1.1
Mesure moyenne des sujets ayant opté pour chacune des catégories de réponses suivant le modèle PC
FIGURE 1.2
Mesure des seuils entre chaque catégorie de réponses selon le modèle PC
FIGURE 1.3
Courbes de probabilité des catégories de réponses de l’item 1 selon le modèle PC
FIGURE 1.4
Sommaire de la structure des catégories de réponses de l’item 1 selon le modèle PC, tel que produit par le logiciel Winsteps
FIGURE 1.5
Courbes de probabilité des catégories de réponses de l’item 1 selon le modèle PC-regroup2
FIGURE 1.6
Sommaire de la structure des catégories de réponses de l’item 1 selon le modèle PC-regroup2, tel que produit par le logiciel Winsteps
FIGURE 1.7
Représentation de Wright suivant le modèle RS
FIGURE 2.1
Adéquation entre la distribution des sujets (histogramme du haut) et des items (histogramme du bas)
FIGURE 3.1
Exemple d’une vignette traduite du TCS construit par Latreille (2012)
FIGURE 3.2
Position des répondants (e : étudiante ; p : praticienne), du niveau d’expérience et des items sur l’échelle de mesure avec la méthode 1
FIGURE 3.3
Position des répondants (e : étudiante ; p : praticienne), du niveau d’expérience et des items sur l’échelle de mesure avec la méthode 2
FIGURE 3.4
Distribution des statistiques d’ajustement infit et outfit basées sur le carré moyen (CM) pour les items et triées en ordre croissant avec la méthode 1 et la méthode 2
FIGURE 3.5
Distribution des statistiques d’ajustement infit et outfit basées sur la valeur standardisée (Z) pour les items et triées en ordre croissant avec la méthode 1 et la méthode 2
FIGURE 3.6
Distribution des statistiques d’ajustement pour les répondants infit et outfit basées sur le carré moyen (CM) et triées en ordre croissant avec la méthode 1 et la méthode 2
FIGURE 3.7
Distribution des statistiques d’ajustement pour les répondants infit et outfit basées sur la valeur standardisée (Z) et triées en ordre croissant
FIGURE 5.1
Cadre de compétence CanMEDS
FIGURE 5.2
Procédure de validation de Kane
FIGURE 5.3
Niveaux d’inférence dans le modèle de Kane
FIGURE 6.1
Photo annotée pour orienter les apprenants
FIGURE 6.2
Exemple d’item
FIGURE 6.3
Exemple de réponses fournies aux apprenants (L4)
Liste des tableaux
TABLEAU 1.1
Comparaison entre la TCT et la modélisation de Rasch
TABLEAU 1.2
Interprétation des indices d’ajustement basés sur la statistique standardisée
TABLEAU 1.3
Résumé de la stratégie d’analyse de la qualité de l’ajustement retenue pour les sujets et les items
TABLEAU 1.4
Résumé de la stratégie d’analyse des échelles de réponses retenue
TABLEAU 1.5
Résumé de la stratégie d’analyse de la dimensionnalité et l’indépendance locale retenue
TABLEAU 1.6
Résumé de la stratégie d’analyse du fonctionnement différentiel d’items retenue
TABLEAU 1.7
Balises pour l’interprétation de l’indice de séparation
TABLEAU 1.8
Résumé des modélisations
TABLEAU 1.9
Incidence des modélisations sur le nombre de sujets
TABLEAU 1.10
Items problématiques au regard des statistiques d’ajustement
TABLEAU 1.11
Statistiques d’ajustements finaux pour les items avec le modèle RS
TABLEAU 1.12
Synthèse du nombre de catégories de réponses utiles, de l’ordonnancement des catégories de réponses et des seuils, ainsi que des regroupements explorés
TABLEAU 1.13
Synthèse de la variance expliquée pour les différents modèles
TABLEAU 1.14
Synthèse de l’analyse de la dimensionnalité des items
TABLEAU 1.15
Corrélations inter-items les plus élevées effectuées sur les résidus standardisés
TABLEAU 1.16
Synthèse des résultats des deux tests d’hypothèse utilisés pour la détection de FDI selon le modèle RS
TABLEAU 1.17
Indices de fidélité pour les sujets selon les modélisations
TABLEAU 1.18
Indices de fidélité pour les items selon les modélisations
TABLEAU 2.1
Échelle de communication médecin-patient pour les externes en médecine (ECMP-EM)
TABLEAU 2.2
Indices d’ajustement de l’analyse factorielle confirmatoire
TABLEAU 2.3
Saturation et coefficient de détermination des items pour l’analyse factorielle confirmatoire
TABLEAU 2.4
Coefficient alpha de Cronbach et statistiques descriptives de l’ECMP-EM
TABLEAU 2.5
Corrélations inter-items
TABLEAU 2.6
Résultats de l’analyse d’items
TABLEAU 2.7
Ajustements itératifs pour ajuster les données au RSM
TABLEAU 2.8
Statistiques décrivant la distribution des sujets et des items (en logit )
TABLEAU 3.1
Estimation des paramètres des items avec la méthode 1
TABLEAU 3.2