Suivi et évaluation de la mise en oeuvre du PEL Hans Ulrich Bosshard, Suisse. Réflexions préliminaires Un processus de développement d'organisation La mise en oeuvre du CECR et du PEL en tant que processus de «développement scolaire» La mise en œuvre du CECR et du PEL signifie un processus de développement d organisation (en anglais «organisation development») qui implique des acteurs à différents niveaux du système et qui doit donc être conduit selon les règles «classiques» de la gestion de projets de développement. a) Dans le contexte éducatif, l approche du «développement scolaire» (school development) se propose. Selon la définition de H.G.Rolff 2, on distingue trois champs d action principaux, liés entre eux dans un contexte systémique: - le développement de l'organisation (programmes d'établissement, "culture", climat; gestion et pilotage de projets; travail en équipe, coopération avec les parents et les employeurs etc) - le développement du personnel (répertoire didadctique des enseignants; auto-/ évaluation et réflexion; communication et coopération; visites mutuelles dans les classes; supervision etc.) - le développement de l enseignement ("culture pédagogique", didactique, méthodologie, gestion de la classe etc). Les phases de gestion de projets "classiques" sont:. Départ > formation d'un groupe de pilotage > contrat 2. (ev. recueil de dates et retour d'informations) > désignation des buts, des objectifs et des priorités. Mise en œuvre 4. Evaluation 5. Consolidation et assurance de la continuité La mise en oeuvre du CECR et du PEL en tant que processus du «développement de la qualité» Sous l'aspect systémique, la supervision et l évaluation des processus devraient s effectuer dans les trois champs d action avec des instruments adaptés aux acteurs. b) De plus, l introduction du CECR et du PEL peut être considérée comme un élément prioritaire dans le processus du développement de la qualité de l enseignement et de l apprentissage des langues (voir aussi le projet du CELV C 2 "Quali Training" ou les résultats du projet du premier programme du CELV 2000-200 «Assurance de qualité et auto-évaluation pour les établissements scolaires et les enseignants». Voir p.ex. Hayworth, Frank. Guide de gestion de projets. ECML/CoE. Graz. 2002 http://www.ecml.at/documents/pub4f2002.pdf 2 Rolff, H.G. (Projektleiter) / Buhren, C. / Lindau-Bank, D. / Müller, S.; Manual Schulentwicklung. Beltz. Weinheim u. Basel. 998 Suivi et évaluation, Hans Ulrich Bosshard
Le processus du suivi et de l'évaluation dans un «cycle de la qualité» : Résolution sur le PEL du Conseil de l Europe 2. Suivi et évaluation de la mise en œuvre du PEL Le suivi et l évaluation de la mise en œuvre d une innovation ou d un nouveau produit constituent des éléments essentiels de conduite et de gestion d un projet. Dans le cas de l introduction du PEL, lors de son lancement par la Conférence permanente des Ministres de l'education du Conseil de l'europe en octobre 2000, la supervision et l évaluation de la mise en œuvre étaient déjà mentionnées explicitement 4 : «Les Ministres européens de l'education, réunis à Cracovie, pour la 20e session de leur Conférence permanente ( ) recommandent que : Les Gouvernements des Etats membres, en accord avec leur politique éducative:. mettent en œuvre ou créent des conditions favorables pour la mise en œuvre et une large utilisation du PEL conformément aux Principes et Lignes directrices arrêtées par le Comité de l'education; ( ) 2.7. supervisent la diffusion, évaluent l impact du PEL et adressent des rapports réguliers au Conseil de l Europe, au moins une fois tous les trois ans. voir Projet "Qualität in Schulen "(Q.I.S.) du Ministre Fédéral Autrichien de l'education, la Science et la Culture (BM:BWK) http://www.qis.at ou http://www.ecml.at/html/quality/francais/le%20parcours%20qualit%e9/q_interne/autriche_qis.htm 4 Résolution sur le Portfolio européen des langues (adoptée lors de la 20e session de la Conférence permanente des Ministres de l'education du Conseil de l'europe, Cracovie, Pologne, 5-7 octobre 2000) Suivi et évaluation, Hans Ulrich Bosshard 2
Définitions du glossaire impel Dans le cadre du projet IMPEL, un glossaire a été développé où les définitions suivantes sont proposées : Des outils pour assurer le suivi Exemples Suisse «Suivi : Le contrôle d un processus, d une action ou d un produit. Dans le contexte du PEL, il peut s étendre sur toute la durée de vie d un projet, du tout début de sa mise en œuvre aux diverses mesures d évaluation prises pour contrôler son efficacité concrète.» 2. Outils pour assurer le suivi Le glossaire impel propose divers outils pour assurer et documenter le suivi :. notes de conférence; 2. notes sur le Portfolio;. carnets de bord d enseignants; 4. listes de contrôle; 5. barèmes de notation; 6. carnets de bord d élèves; 7. observations empiriques des élèves; 8. profils des apprenants; 9. carnets de bord des classes; 0. questionnaires ; les questionnaires devraient aussi être utilisés pour la recherche qualitative et quantitative lors des phases de diffusion. 2.2 Exemples Ad. Notes de conférence / Recueil d informations / Tableau synoptiques: En Suisse, un pays fédéraliste avec 26 cantons, le pilotage de la mise en œuvre du PEL est organisé par le biais d un réseau de responsables PEL cantonaux qui sont regroupés dans des groupes régionaux, dont les délégués forment le groupe national de pilotage PEL, voir organigramme. Les détails concernant l organisation se trouvent dans le descriptif du projet Suivi et évaluation, Hans Ulrich Bosshard
PEL Suisse ou sur le site www.portfoliolangues.ch L état d avancement de la mise en œuvre dans les régions et dans les cantons est régulièrement rapporté par les responsables régionaux et résumé dans un tableau synoptique. Exemple de trois cantons de la Suisse orientale : Ad Carnets de bord / rapports d enseignants Au canton de Zurich / Suisse, la mise en œuvre du PEL au degré secondaire supérieur est suivi et évalué par l office spécialisé Fachstelle Fremdsprachen Sekundarstufe II» : voir le descriptif du projet ZH. Des rapports d enseignants sont systématiquement publiés sur le site Mittelschul- und Berufsbildungsamt des Kantons Zürich. Suivi et évaluation, Hans Ulrich Bosshard 4
Ad 0. Questionnaires Projet pilote PEL Suisse en 2000 a) pour étudiants / pour apprenants Dans le cadre de l expérimentation du projet pilote PEL Suisse en 2000 par l université de Fribourg / Suisse, des questionnaires pour étudiants et pour enseignants étaient établis, voir http://www.unifr.ch/ids/portfolio/welcomealt.htm; questionnaire apprenants, questionnaire enseignants. Italie b) pour l administration au niveau national: En Italie, la mise en oeuvre du PEL a été suivi par le ministère au moyen de questionnaires : scheda per uffici scolastici regionali, scheda per scuole Conseil de l Europe au niveau international : La Division des Politiques Linguistiques (DPL) du Conseil de l Europe assure le suivi de la mise en œuvre du PEL dans les pays membres par des questionnaires à la base desquels le rapporteur général établit ses rapports : rapport PEL CoE Suivi et évaluation, Hans Ulrich Bosshard 5
Project C 5 IMPEL ELP implementation support Soutien à la mise en oeuvre du PEL Groupe d âge Statut Modèles PEL Rapport intermédiaire au CoE novembre 2006 rs -0-5 6+ Form. Prof. Form. Sup. Form. adultes validés 84 20 28 9 4 0 validation en cours 9 5 versions pilotes (NL el exclu) 22 9 2 2 en préparation PEL validés en révision Suivi et évaluation atelier CELV 29- mars 2007 hub Exemplaires PELdistribués Rapport intermédiaire au CoE novembre 2006 rs Project C 5 IMPEL ELP implementation support Soutien à la mise en oeuvre du PEL 700000 600000 500000 400000 00000 200000 00000 0 998-2000 200-2002 2002-200 200-2004 2004-2005 2005-2006 2006-2007 ELPs in use - total numbers reported by school years Suivi et évaluation atelier CELV 29-2007 mars hub c) Questionnaires électroniques / en ligne Pays Bas au niveau national : Au Pays Bas, le PEL est diffusé en ligne en forme électronique voir descriptif du projet NL ou site http ://www.europeestaalportfolio.nl/taalportfolio/en/show.do?ctx=000,0 020. En automne 2006, dans le cadre d une enquête électronique, 200 utilisateurs ont répondu au moyen d un questionnaire en ligne (0 questions). Suivi et évaluation, Hans Ulrich Bosshard 6
Les résultats ont été présentés en ligne : Projet impel «Version alpha» du questionnaire en ligne au niveau international : Le projet IMPEL a développé une «version alpha» d un questionnaire en ligne pour obtenir des descriptifs structurés de projets de mise en oeuvre PEL aux différents niveaux : http://impel.ecml.at/ Etape : indications générales concernant un projet de mise en œuvre. Suivi et évaluation, Hans Ulrich Bosshard 7
Etape 5 : Indications concernant les résultats attendus. Exemple d un descriptif de projet Exemple d un descriptif de projet de mise en œuvre du PEL : Liste des descriptifs La «version alpha» de la liste des descriptifs de projet se trouve sur le site interne : http://impel.ecml.at/projects/ Suivi et évaluation, Hans Ulrich Bosshard 8