Diplôme Inter-Universitaire de Pédagogie Médicale. Année Universitaire

Transcription

1 Diplôme Inter-Universitaire de Pédagogie Médicale Année Universitaire Jean-Baptiste Charrier Service d ORL et de Chirurgie de la Face et du Cou, CHU de Bicêtre Université Paris Sud Sujet du mémoire : Dans le cadre de la nouvelle coordination du DES d ORL d Ile de France : Utilisation et évaluation du système de vote électronique pour l'enseignement théorique Mise en place d un site Internet dédié

2 RESUME : Le changement récent de la coordination du DES d ORL d Ile de France a conduit le Collège des enseignants d ORL d Ile de France à la proposition d une réforme. Nous nous intéresserons dans ce mémoire à 2 aspects particuliers de cette réforme : 1) L utilisation et l évaluation d un système de vote électronique Power Vote dans le cadre de l enseignement théorique. 2) La mise en place d un site Internet dédié. INTRODUCTION Les diplômes d études spécialisées (DES) représentent le troisième cycle des études médicales et sont admis à s y s inscrire, les étudiants classés aux épreuves classantes nationales. Leur formation est assurée de façon régionale sous la direction d un coordonnateur qui guide les étudiants dans la maquette spécifique à chaque DES définit par décret et organise leur validation après remise de mémoire et audition des candidats par un jury. Il organise également l enseignement proposé à ces étudiants (Annexe 1). L enseignement du DES d ORL d Ile de France est depuis peu sous la responsabilité du Pr. Serge Bobin, chef de service d ORL et de Chirurgie Cervico-Faciale au CHU de Bicêtre, Université Paris Sud. Lors de son élection, le Pr. Bobin a proposé un projet pédagogique qui s articule sur un certains nombre d items (Annexe 2) : l'acquisition de connaissances, l acquisition de compétences, la création d un site Internet dédié, une démarche qualité, l'ouverture à la recherche, JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 2

3 l'ouverture à l'international. Au cours d une réunion récente du Collège des enseignants d ORL d Ile de France ont été définis les principes importants de la réforme du DES d ORL (Annexe 3). Nous nous intéresserons plus particulièrement à 2 aspects de cette réforme : 1) l utilisation et l évaluation d un système de vote électronique Power Vote dans le cadre de l enseignement théorique ; 2) la mise en place d un site Internet dédié. I. Utilisation et l évaluation d un système de vote électronique Power Vote dans le cadre de l enseignement théorique du DES d ORL d Ile de France. La tendance moderne de l enseignement tend à favoriser les petits groupes de formation plutôt que les cours magistraux. Un enseignement dirigé en petit groupes est en effet plus stimulant et implique souvent la participation de tous les membres du groupe de travail. Un des intérêts particuliers d un petit groupe de travail est de pouvoir mettre en place des stratégies d enseignement actif. Le caractère interactif des discussions réalisables en petit groupes peut favoriser la performance de l étudiant (Lake 2001). En particulier si l on s intéresse à la capacité de mémorisation, la pensée critique et la résolution de problèmes (McKeachie ds BMC 2005). Il est malheureusement souvent observé dans la pratique, que l enseignant tend à adopter le même type de comportement dans les petits groupes de travail que dans les cours magistraux. La conséquence peut alors être un cours de type magistral appliqué à un petit groupe, ce qui fait perdre une grande partie de l intérêt du petit groupe pour les techniques d apprentissage actif. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 3

4 Il existe une multitude de facteurs qui influencent la dynamique d un enseignement en petit groupe de travail. Le style et l attitude de l enseignant sont importants et le retour sur investissement de l enseignant se fera rapidement sentir du fait de la participation des étudiants. Plus le groupe est important, plus ce type d investissement pédagogique est difficile. Ceci est du en partie à la taille du groupe, mais aussi en partie à cause du fait qu un étudiant aura d autant plus tendance à se trouver dans un situation embarrassante lors d un réponse fausse à une question que la taille du groupe est importante. Un étudiant doit en effet pouvoir se sentir en confiance vis à vis de l enseignant et de ses pairs avant de participer. Il existe de nombreuses stratégies visant à augmenter la participation individuelle dont fait partie le système de vote électronique. Il s agit d une série de boîtiers de la taille d un téléphone portable comprenant plusieurs boutons dont l utilisation est très simple, même pour une personne novice. Ce boîtier communique avec l unité de contrôle central permettant d obtenir le résultat extemporané à une question posée à toute l assemblée par l intermédiaire d une vidéoprojection murale par exemple. L utilisation de ce système a déjà fait l objet de publications dans le cadre plus large de la formation complémentaire d obstétricien seniors par télémédecine (Morris, Bakewell et al. 1999). Les moyens techniques utilisés pour améliorer la qualité de l enseignement sont nombreux et peuvent comprendre une aide audio visuelle comme des diapositives, des films, des présentations Power Point (Grieve 1992; Kerfoot, Masser et al. 2003). Des aides complémentaires au cours sous forme de support écrit ont aussi été proposées (Butler 1992). La plupart des études concernant ces moyens techniques complémentaires à l enseignement conventionnel montrent une préférence pour telle ou telle méthode. Cependant, ces techniques ne sont pas dépourvues d inconvénients, en particulier leur caractère chronophage et coûteux et ne peuvent en aucun cas être justifiées si elle n ont pas fait la preuve de leur efficacité d un JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 4

5 point de vue pédagogique. L utilisation d enseignement assisté par ordinateur par exemple, rend les conditions d apprentissage plus agréable, mais dans l étude de Taverner et coll ; (2000), ne montrait pas de différence lors de l évaluation par rapport à des techniques conventionnelles d apprentissage par groupe de travail (Taverner, Dodding et al. 2000). Le système de vote électronique est fréquemment utilisé dans les réunions et les congrès scientifiques. C est en effet objectivement la méthode la plus rapide et la plus fiable pour évaluer les réponses dans une assemblée plutôt que de compter les mains levées. Cependant la question concernant l efficacité de tels systèmes dans l engagement et la participation de l auditoire reste ouverte. Ce système est maintenant couramment utilisé dans un cadre pédagogique auprès des étudiants et a fait l objet de plusieurs publications scientifiques (Palmer, Devitt et al. 2005; Duggan, Palmer et al. 2007). Nous avons récemment «upgradé» le système de vote électronique Power Vote de la Faculté de Médecine Paris Sud acquis en 1996 (Annexe 4). Ce type de système est utilisé depuis plusieurs dizaines d années (Bridgman and Matzke 1965; Appleby 1968). Cependant il comportait un caractère très onéreux et les boitiers de génération précédente n étaient pas sans fil ce qui comportait un caractère limitant tant pour la distribution spatiale que pour le nombre de participants. Les modèles plus récents avec des systèmes infra-rouges ou radio permettent un équipement mobile avec un coût réduit. L utilisation du système Power Vote est extrêmement simple et nécessite un apprentissage d une quinzaine de minutes pour un utilisateur de PC habitué à travailler sur le logiciel Power Point. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 5

6 Un système moderne de vote électronique se présente comme une petite télécommande de télévision dont dispose chaque membre de l audience qui sont reliés en chaîne par un port série PC. Il existe un logiciel spécifique de fonctionnement. Les questions peuvent être posées soit de façon conjointe soit de façon séparée lors d une présentation Power Point ou simplement énoncées oralement. Elles sont préparées à l avance. Dans le cadre d une audience de 200 personnes, il est faut environ 2 minutes pour recueillir les données, 30 secondes pour 50 personnes. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 6

7 Quand le recueil des données est terminé, une projection montre le pourcentage de personnes qui ont voté pour telle ou telle réponse. De cette façon, tout le monde est capable de voir le consensus de la salle et son degré tout en connaissant la réponse qu il a lui-même sélectionnée et de cette façon comparer sa réponse au reste des réponses de l assemblée. Chaque réponse est anonyme vis à vis de l assemblée et aussi anonyme vis à vis du professeur sauf si ce dernier souhaite connaître les réponses de chaque individu en fonction de leur identité correspondant à leur système de vote électronique. Il est tout à fait possible et même nécessaire de mélanger des questions par système de vote électronique à des modalités de réponse plus conventionnelles comme celle qui consiste à simplement lever la main ou interroger des personnes de façon individuelle et non anonyme. De cette façon, il est possible de passer d un mode de questionnement anonyme et exhaustif à des modalités différentes qui entretiennent la dynamique de l enseignement. Les modalités pédagogiques pour lesquelles ce système a été utilisé sont : - examen (évaluation formative sous forme de Q.C.M.). - questions d auto-évaluation dans une optique de feed back formatif qui permet de dire à chaque étudiant dans quel domaine il a besoin de travailler plus. - Le même type de question donne aussi un feed back au professeur et dans certain cas, ce dernier pouvait utiliser les réponses aux questions pour évaluer dans quel domaine il peut être nécessaire pour ce dernier de fournir des explications plus prolongées en fonction des domaines dans lesquels il avait beaucoup de réponses fausses. - Aide à la prise de conscience collective dans des petits groupes de personnes. - Pour alimenter la discussion. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 7

8 Les bénéfices qui ont été retenus lors d une étude récente faite à la faculté de Glasgow concernant le système de vote électronique sont les suivants (Draper and Brown 2004) : 1) ce système est amusant et entraîne des pauses pendant les cours. 2) ce système rend les cours plus interactifs, intéressants et implique l ensemble de la classe. 3) J aime faire savoir mon opinion pendant le cours et savoir ce que les autres pensent. 4) Le caractère anonyme permet aux étudiants de répondre sans être embarrassés. 5) Cela me donne une idée d où j en suis par rapport au reste de la classe. 6) Cela permet de vérifier que l on comprend le cours comme on a l impression de le comprendre. 7) Cela permet de mettre en évidence les problèmes. 8) Les professeurs peuvent modifier leur cours en fonction de ce que les étudiants trouvent difficile. 9) Permet de donner une évaluation de la mesure dans laquelle le professeur explique bien ses idées. La maquette d enseignement théorique du DES d ORL est séparée en 7 modules : Module de chirurgie plastique tête et cou Module otologie Module infectiologie Module oncologie Module pédiatrique Module laryngologie non cancérologique et phoniatrie JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 8

9 Module de rhinologie Dans le cadre de la nouvelle maquette d enseignement, il est prévu d effectuer une «colle» toutes les 20 heures d enseignement, ce qui correspond à la fin de chaque module d enseignement. A titre d exemple est fourni en annexe le calendrier d enseignement de Rhinologie (Annexe 5). Les colles de 8h30 à 11h les samedi matin et comprendront : 1. Quatre cas cliniques préparés par les enseignants (2 par HU) et traités par les étudiants pour une durée totale de 1h30 ; 2. Une question de 20 min donnée à l avance à un étudiant par un des deux HU de la colle qui présentera soit un diaporama soit au paper board ; 3. Deux analyses critiques d article (20 min chacune) portant sur les sujets du programme, donnés par les deux HU à deux étudiants à l avance. Les réponses aux cas cliniques se feront avec l utilisation du système Power vote. Au terme de chaque séance de «colle», la session sera évaluée par questionnaire. L objectif d évaluation prospectif est de savoir l intérêt ou le désintérêt que portent les étudiants et les enseignants au système de vote électronique. Une échelle de type LIKERT comprenant 4 niveaux allant de 1 à 4 sera utilisée dans le cadre d une évaluation sommative pour savoir dans quelle mesure cette initiative est valable. Concernant l opinion des étudiants, nous utiliserons les 9 critères retenus par Draper et Brown dans leur étude de 2004 (Annexe 6). Concernant l opinion des enseignants, nous utiliserons un questionnaire mis en place par Duggan et coll comprenant 9 critères sur une échelle de type LIKERT comprenant 4 niveaux allant de 1 à 4, et 3 réponses ouvertes (Annexe 7). JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 9

10 La saisie des données se fera sur Access. Les données seront transférées sur le logiciel d analyse statistique SAS. Ces étapes seront réalisées au sein de l unité de recherche clinique Paris Sud. Les responsables de l analyse statistique des données sont les Pr Alexia Letierce et Laurent Becquemont de l Unité de Recherche Clinique Paris Sud. II. Mise en place d un site Internet dédié au DES d ORL L adresse du nouveau site Internet dédié au DES d ORL d Ile de France est : L utilisation de l Internet est devenue pratique courante pour la plupart des étudiants qui sont très familiarisés à cela. La création d un site Internet pour le DES d ORL est avant tout un moyen d information sur les différents éléments inhérent à la formation de spécialité, mais aussi un moyen d apprentissage par les liens, les références et les ressources qui peuvent y être laissés. L existence de sites Internet pour les DES tend à se généraliser et a d ailleurs fait l objet d un mémoire de DIU de pédagogie Médicale l an passé (C. Besançon, Faculté de Médecine Paris VI). Pour des raisons pratiques et de coût, nous avons choisi le site de l Université Paris- Sud comme site d hébergement. Les principaux avantages d avoir l Université comme site d hébergement sont le faible coût, le fait de pouvoir bénéficier du label de l Université et de l aide technique des JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 10

11 informaticiens. L inconvénient majeur est le nom imposé qui rend le site peu accessible pour le grand public et peu enclin à figurer sur les moteurs de recherche. Le logiciel de création web que nous avons utilisé est : Front Page. Dans une optique de centralisation des sites de l Université Paris Sud, la société Anywhere a développé le site avec le logiciel d application CMS (Content Management System). Le serveur central est situé à Orsay, le responsable informatique est M. Roland Touchet. Le webmaster du site du DES d ORL est M. Patrick Vanessche à la Faculté de Médecine Paris Sud. L intérêt majeur de ce nouveau système CMS est de pouvoir, sous condition de droits établis préalablement pour des personnes désignées, d avoir les droits de rédacteur, valideur et gestionnaire de rubrique. Cette option offre l intérêt d une très grande plasticité avec possibilité de pouvoir réactualiser le site pratiquement en temps réel. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 11

12 Nous avons prévu deux niveaux de sécurité dans le site. Le premier niveau sera tous publics, accessible sans mot de passe. Le deuxième niveau sera d accès restreint et concernera les étudiants inscrits en DES d ORL, durant leur période de formation, ainsi que les enseignants. Son accès nécessitera un login et un mot de passe délivrés par le webmaster. Cette partie du site nécessitera un mot de passe car elle contiendra des informations relevant du domaine privé pour l étudiant et des informations professionnelles pour l enseignant. Un problème auquel nous nous sommes heurtés est que le système CMS ne gère pas les informations cryptées. La conséquence est qu en cas d informations cryptées l internaute sera basculé vers un autre serveur PHP, sur l adresse lui aussi situé à Orsay, mais qui est capable de gérer ce type de données. Les différentes sections du site sont les suivantes : JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 12

13 Les principaux enseignants impliqués dans la formation des internes de DES se partagent les tâches correspondant aux rubriques du site. Je suis moi-même impliqué dans le module de chirurgie plastique tête et cou et souhaite mettre à la disposition des étudiants les diaporamas des cours de ce module sous forme de PDF. Je vais aussi participer à réunir de façon prospective les thèses et les mémoires de spécialité afin qu ils soient disponibles en JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 13

14 ligne et actualiser le site sur les dates de congrès, les sociétés savantes et les liens utiles à la formation et l information des DES. CONCLUSION Le développement récent des technologies sans fil et de l Internet offre la possibilité de nouveaux outils pédagogiques. Nous nous proposons d utiliser 2 de ces outils dans le cadre d une démarche qualité, le système de vote électronique à distance et un site web dédié, afin améliorer l enseignement théorique de l ORL aux DES d Ile de France. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 14

15 BIBLIOGRAPHIE Appleby, E. C. (1968). "Teaching aids and the practitioner." Vet Rec 83(12): Bridgman, C. F. and H. A. Matzke (1965). "Innovations in the teaching of anatomy." Am J Vet Res 26(115): Suppl: Butler, J. A. (1992). "Use of teaching methods within the lecture format." Med Teach 14(1): Draper, S. W. and M. I. Brown (2004). "Increasing interactivity in lectures using an electronic voting system." Journal of computer assisted learning 20: Duggan, P. M., E. Palmer, et al. (2007). "Electronic voting to encourage interactive lectures: a randomised trial." BMC Med Educ 7(1): 25. Grieve, C. (1992). "Knowledge increment assessed for three methodologies of teaching physiology." Med Teach 14(1): Halloran, L. (1995). "A comparison of two methods of teaching. Computer managed instruction and keypad questions versus traditional classroom lecture." Comput Nurs 13(6): Kerfoot, B. P., B. A. Masser, et al. (2003). "How does the introduction of computers and wallmounted plasma screens Impact small group tutorials? Preliminary results." Med Educ 37(5): Lake, D. A. (2001). "Student performance and perceptions of a lecture-based course compared with the same course utilizing group discussion." Phys Ther 81(3): Morris, D. G., M. A. Bakewell, et al. (1999). "The enhancement of audience participation in telemedicine education by the use of electronic voting." J Telemed Telecare 5 Suppl 1: S12-4. JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 15

16 Palmer, E. J., P. G. Devitt, et al. (2005). "Assessment of an electronic voting system within the tutorial setting: a randomised controlled trial [ISRCTN ]." BMC Med Educ 5(1): 24. Paschal, C. B. (2002). "Formative assessment in physiology teaching using a wireless classroom communication system." Adv Physiol Educ 26(1-4): Taverner, D., C. J. Dodding, et al. (2000). "Comparison of methods for teaching clinical skills in assessing and managing drug-seeking patients." Med Educ 34(4): ANNEXES ANNEXE 1 : Texte officiel de la maquette d ORL ANNEXE 2 : DES d'oto-rhino-laryngologie et Chirurgie Cervico-Faciale : PROJET PEDAGOGIQUE ANNEXE 3 : Collège des enseignants d ORL d Ile de France. Compte rendu de la réunion du 12/09/2007 ANNEXE 4 : Brochure publicitaire du système Power Vote ANNEXE 5 : Calendrier d enseignement de Rhinologie année ANNEXE 6 : Questionnaire type pour les étudiants ANNEXE 7 : Questionnaire type pour les enseignants JB Charrier DIU de pédagogie médicale/ DES d ORL d Ile de France 16