MIEL : mutualisation d autoévaluations en ligne de niveau L

Transcription

1 MIEL : mutualisation d autoévaluations en ligne de niveau L Mylène POTIER Ingénieur IUTenligne. Chef de projet MIEL miel@iutenligne.net Jean-Luc BACH Enseignant - Université Toulouse 3 (IUT A Paul Sabatier) Responsable pédagogique MIEL pour IUTenligne jean-luc.bach@iut-tlse3.fr Xavier PUMIN Enseignant Université de Toulouse 2 Jean Jaurès (IUT de Figeac) Chef du champ «Management des Activités Tertiaires» d IUTenligne pumin@univ-tlse2.fr Sylvie ROUX Enseignante - Université Toulouse 3 (IUT A Paul Sabatier) sylvie.roux@iut-tlse3.fr RESUME Avec la plateforme MIEL, l Université Numérique Thématique (UNT) IUTenligne propose une banque mutualisée de tests de niveau L. Ces quiz d autoévaluation sont directement accessibles aux étudiants mais c est en les téléchargeant sur une plateforme locale que les enseignants peuvent en tirer le meilleur profit : ils peuvent les adapter à leur contexte pédagogique et suivre le travail de leurs étudiants. A travers trois retours d expérience d enseignants, nous montrons l intérêt de cette banque mutualisée dont l usage est rendu très simple par un important travail en amont de l équipe technique d IUTenligne. MOTS-CLES : autoévaluation, Moodle, motivation, réussite, mutualisation, échanges pédagogiques. PédagoTICE /5 max.

2 1 INTRODUCTION Très appréciés des étudiants, les tests d évaluation en ligne permettent de diversifier les approches pédagogiques et de favoriser la réussite des étudiants. En 2011, un rapport sénatorial 1 proposait de «développer les autotests et quiz numériques en particulier en évaluation formative» La conception de ces quiz reste cependant chronophage. Au travers de la plateforme MIEL (Moodle pour les tests d Iut En Ligne), IUTenligne propose une mutualisation de tests de niveau L. Ces quiz d autoévaluation sont directement accessibles aux étudiants mais c est en les téléchargeant sur une plateforme locale que les enseignants peuvent en tirer le meilleur profit : ils peuvent les adapter à leur contexte pédagogique et suivre le travail de leurs étudiants. Dans cette communication, nous allons montrer quelques utilisations pédagogiques des tests de MIEL. Ces utilisations sont rendues très simples par un important travail technique en amont. Le contexte particulier d une UNT (Université Numérique Thématique) fait que les enseignants utilisateurs sont peu en contact avec l équipe technique : celle-ci doit donc anticiper les besoins des utilisateurs seulement à partir de quelques retours d expérience. 2 DEROULEMENT DU PROJET 2.1 Origines du projet Créée en 2000 à la suite de l appel à projet Campus Numérique, l UNT IUTenligne propose une médiathèque de 1400 ressources pédagogiques numériques dans les 24 spécialités d IUT, ressources utilisables par la plupart des formations de niveau L. IUTenligne est structuré en 6 champs disciplinaires, chacun piloté par un chef de champ. Une équipe technique de 3 informaticiens assure l administration de ces ressources Moodle est la plateforme open source la plus utilisée au monde. En France, elle est utilisée dans la majorité des universités. Dès 2005, elle a été retenue par tous les établissements de l enseignement supérieur de Midi-Pyrénées. Ce choix à conduit à de fructueuses collaborations, via la communauté d utilisateurs CIMENT, rebaptisée Interstices. Le colloque PédagoTICE trouve d ailleurs son origine dans cette communauté. Dès 2005, des enseignants de l IUT Paul Sabatier de Toulouse ont créé des tests sur Moodle. Certains d entre eux ont été mutualisés dans la banque de question MPC (Maths, Physique, Chimie) et utilisés par plusieurs équipes d enseignants. En 2010, sur proposition de l IUT Paul Sabatier, IUTenligne a souhaité étendre cette mutualisation au niveau national et pour toutes les domaines enseignés en IUT. Une enquête montrant que Moodle était utilisée par les 2/3 des IUT a permis de valider le projet. Cette mutualisation a été implémentée sur une plateforme Moodle dédiée, baptisée MIEL (Moodle par Iut En Ligne). 2.2 Objectifs et méthodologie de mise en œuvre : la vision du technologue L objectif général de MIEL est de faciliter l utilisation de tests en ligne en évitant la phase chronophage de création 2. Le projet MIEL est piloté par un chef de projet, ingénieur informatique d IUT en Ligne (Mylène Potier) et par un responsable pédagogique, enseignant en IUT (Jean-Luc Bach). Pour cette équipe, il s agit de recruter des auteurs, de faire expertiser pédagogiquement les tests puis de les formater techniquement avant de les mettre à disposition des utilisateurs sur MIEL. Par rapport à des tests en ligne que l on peut trouver sur Internet, ceux de MIEL présentent plusieurs originalités qui les rendent uniques : -ils sont «formatifs», c est-à-dire qu ils comportent des indices et «feedbacks» pour aider les étudiants seuls devant leur écran -ils peuvent être interrompus et repris ultérieurement au point où ils ont été laissés -ils sont téléchargeables par les enseignants pour être implantés sur leur plateforme Moodle locale dont la version peut être variable, PédagoTICE /6

3 -ils font partie d une base homogène et finement classée de plusieurs centaines de tests et de plusieurs milliers de questions qui couvriront à terme plus de 100 domaines disciplinaires -les questions peuvent être utilisées seules et constituent le grain pédagogique le plus fin. Ces particularités induisent d importantes contraintes techniques et pédagogiques. Il a fallu plus de deux ans de travail à l équipe pilote de techniciens et pédagogues (premiers auteurs, experts et utilisateurs, ) avant d aboutir à un prototype qui est depuis en amélioration constante. A toutes les étapes de la création l équipe MIEL s efforce de simplifier le travail des pédagogues qu ils soient auteurs ou utilisateurs Les auteurs peuvent ainsi bénéficier 3 : - de conseils pédagogiques pour créer des tests formatifs : feedbacks et indices pertinents, (cf. 5 annexe), - de la prise en charge éventuelle de la médiatisation de leurs questionnaires, - d une aide et d un «contrôle qualité» par un expert, enseignant spécialiste de la même discipline, - de formation et de conseils techniques par des spécialistes des tests Moodle. Lors de cette phase précédent la mise en ligne des tests, les échanges sont nombreux entre auteur, expert, responsable pédagogique de MIEL, équipe technique d IEL et médiatiseur : le test publié sur MIEL est parfois très éloigné de sa version initiale. Dans tous les cas, il répond aux spécifications particulières de MIEL et vise une qualité «professionnelle» De leur côté, les utilisateurs (étudiants ou enseignants) doivent accéder facilement à la plateforme MIEL, pour laquelle une identification est indispensable (sinon plusieurs personnes pourraient travailler sur le même test au même moment). Suivant leur profil, ils peuvent se connecter : -avec les identifiants de leur établissement d origine, via le service de fédération d identités Shibboleth -en créant un compte personnel, par exemple s ils sont en formation continue, en lycée ou dans un établissement étranger. Le classement des ressources doit leur permettre d accéder facilement aux quelques 400 tests et 8000 questions actuellement disponibles dans des thématiques allant du marketing à l électronique en passant par les langues, les mathématiques ou la bureautique. De plus, les enseignants des établissements français d enseignement supérieur peuvent télécharger les fichiers de sauvegarde des tests et les installer en moins de deux minutes sur leur plateforme locale. Les ressources réceptionnées sont parfaitement identifiables : les tests, les catégories de questions et les questions elles-mêmes sont «tagués» avec l'identifiant MIEL, le nom de l'auteur et le numéro du test. Cela permet de trier facilement les questions pour les modifier ou n en conserver que certaines et ainsi de faciliter leur appropriation. 2.3 Objectifs et méthodologie de mise en œuvre : la vision du pédagogue Exploitant les possibilités de Moodle, les tests d autoévaluation de MIEL vont au-delà des QCM classiques avec des questions beaucoup plus variées et complexes : numériques avec tolérance, calculées aléatoires, questions Cloze ou composées, glisser/déposer, couplées avec un «laboratoire virtuel», etc. Cette richesse permet d élaborer des tests de grande qualité qui peuvent être utilisés dans de nombreuses situations pédagogiques : - en évaluation diagnostique en début de formation pour évaluer le niveau des étudiants et, par exemple, leur proposer un parcours adapté (tests en langues ou bureautique, mise à niveau de bacheliers technologiques, ) - en autoévaluation formative (aide au travail personnel, préparation de TP, ) PédagoTICE /6

4 - en TD présentiel pour «apprendre autrement» - en évaluation finale (examens en ligne ). Nous présentons ici trois retours d expériences significatifs des diverses utilisations. Deux des enseignants cités font partie d IUTenligne et la troisième est auteur pour MIEL. Cette situation d «initiés» leur a permis d être parmi les premiers à voir tous les avantages qu ils pouvaient en tirer pour leurs propres enseignements Utilisation directement sur MIEL. Pour les étudiants, il n est pas naturel d aller travailler spontanément sur MIEL. La prescription par un enseignant semble donc nécessaire. Celui-ci peut proposer un lien vers un test de MIEL, par exemple depuis sa plateforme locale. Sur IUTenligne, il a aussi la possibilité de créer un «cartable électronique» regroupant un ensemble de ressources, dont des quiz. Il en indique ensuite les références à ses étudiants. L enseignant peut aussi travailler directement sur MIEL en présentiel. Ainsi à l IUT Paul Sabatier de Toulouse, dans le cadre de l «apprendre autrement», Sylvie Roux propose à ses étudiants de travailler en semi-autonomie sur une sélection de tests d électricité. La connexion à MIEL avec leurs identifiants est très rapide grâce à l utilisation de Shibboleth. ils accèdent aux auto-évaluations via l URL donnée par l enseignante ou par une navigation par diplôme ou thématique. Pour cette utilisation de MIEL, il n y a besoin d aucune compétence sur Moodle L enseignante reste à la disposition des étudiants pour résoudre leurs difficultés. Travaillant à leur rythme, ceux-ci progressent grâce aux indices et feedbacks. Cette interactivité et la nouveauté de cette forme d enseignement constituent pour eux une forte source de motivation Importation sur une plateforme locale Dans le même IUT, Jean-Luc Bach propose, en travail personnel, des tests d autoévaluation obligatoires pour vérifier la compréhension de TD d électronique. Après avoir passé beaucoup de temps à créer ses propres quiz, cet enseignant trouve maintenant sur MIEL des questionnaires créé par des collègues d autres IUT. Certains correspondent parfaitement à ses enseignements : en moins de deux minutes, il peut les mettre à la disposition de ses étudiants sur sa plateforme locale. Il peut alors suivre leur travail et prendre en compte les résultats obtenus. Pour d autres tests, seules certaines questions l intéressent : après importation, il les combine aux siennes pour faire un nouveau quiz. Il peut adapter les questions de MIEL à son contexte, par exemple en faisant correspondre les notations à celles qu il utilise Utilisation des tests pour une évaluation diagnostique ou sommative A l IUT de Figeac, Xavier Pumin puise dans les nombreuses questions de bureautique disponibles sur MIEL pour construire des évaluations diagnostiques ou sommatives. La banque de bureautique a la particularité d être riche de plus de 800 questions. À chaque fonction, fonctionnalité, méthode ou interface de bureautique, il y a un ensemble de questions similaires, permettant de réaliser des tests en utilisant le tirage aléatoire dans une catégorie. Le classement en catégories de MIEL permet de créer rapidement des tests de positionnement ou d évaluation sommative en bureautique adaptés aux contenus des programmes de filières aussi différentes que le DUT Techniques de Commercialisation, le DUT Génie Mécanique et Productique, la Licence Marketing des Produits Agro-alimentaires ou la Licence Commercialisation des Produits et Services Industriels. PédagoTICE /6

5 3 RESULTATS ATTENDUS 4 Les tests en ligne sont particulièrement appréciés des étudiants : ils peuvent s entraîner librement et à volonté. Ils progressent avec la correction immédiate, les feedbacks, les indices, les conseils formateurs. La mise à disposition de la banque MIEL permet aux enseignants de répondre à cette forte appétence avec un investissement limité. Côté enseignants, la mutualisation induit une ouverture vers les pratiques d autres collègues et des échanges pédagogiques : ils y trouvent des idées, comparent les savoirs faire des étudiants et ont même parfois envie de créer leurs propres quiz. Ces tests peuvent aussi être une source d inspiration pour leurs enseignements classiques: ils peuvent s en servir pour créer des TD ou des évaluations sur papier. 4 CONCLUSIONS, IMPACTS ET PERSPECTIVES ATTENDUS 4.1 La vision du pédagogue Les autoévaluations créées pour quelques dizaines d étudiants d IUT deviennent disponibles gratuitement pour des centaines de milliers d étudiants francophones. Avec 50 auteurs, 400 tests et 8000 questions, la base est conséquente. Elle permet déjà de proposer les tests à de nombreuses filières de niveau L. Certains sont même utilisables en lycée et d autres en Master. Il reste cependant beaucoup à faire pour couvrir totalement les 24 spécialités d IUT et les 62 domaines thématiques d IUTenligne. 4.2 La vision du technologue Initié en 2010, le projet MIEL a été ouvert au public en 2013 et reconnu par FUN 5 en Les procédures pour les auteurs, experts et utilisateurs sont maintenant bien définies, même si des améliorations restent possibles. La forte diversité des thèmes couverts nécessite de poursuivre un important travail de classification des ressources, à l exemple du seul domaine électronique qui a été décliné en 38 sousthèmes pour guider les utilisateurs. La mise à jour des tests est déjà réalisée avec la notion de version. L information des utilisateurs pour leur actualisation lorsqu ils ont été téléchargés sur les plateformes locales doit être systématisée. Actuellement seuls les échanges entre instances Moodle sont possibles. Les rendre possibles avec d autres types de plateformes est un des prochains objectifs. Enfin si MIEL est potentiellement utilisable par des dizaines de milliers d enseignants et des centaines de milliers d étudiants du monde francophone, il reste à le leur faire savoir plus largement. 5 ANNEXE : FEEDBACKS ET D INDICES Le guide auteur de MIEL 6 propose les spécifications suivantes: un feedback ou un indice peut être o un rappel d une notion de cours o une suggestion de méthode de résolution un feedback ou un indice peut comporter o des questions o des schémas o un lien «interne» vers une ressource d IEL ou d une autre UNT (Université Numérique Thématique) un feedback où un indice n est pas o un conseil du type «relire votre cours» ou «recommencer» o une information qui permet de deviner la réponse sans avoir compris o un lien externe : utiliser le contenu de ce lien et l intégrer dans l indice PédagoTICE /6

6 Exemples d indice et de feedback : Indice : identique quelle que soit la réponse Feedback : adapté en fonction de la réponse donnée 6 REFERENCES / BIBLIOGRAPHIE 1 : rapport du sénateur Christian Demuynck sur le décrochage étudiant ( 2 : MIEL : une plateforme de tests pour les apprenants et les enseignants- Mylène Potier et Jean-Luc Bach - Journées Pédagogie et Professionnalisation des IUT - Lyon : Prenez le contrôle de vos évaluations Mylène Potier- Moodle Moot Paris 4 : Mutualisation de test pour les enseignants d IUT- Mylène Potier Le Printemps du Numérique - Nanterre 4 juin : MIEL sur France Université Numérique (FUN) 6 : Guide de l auteur et de l expert de tests MIEL. Document interne IUTenligne- JL Bach et Mylène Potier PédagoTICE /6