GOEDE PRAKTIJK/BONNE PRATIQUE EDS - étudiants Christine Defoin
Préambule (1): Expériences préliminaires non structurées Décret du 14 novembre 2002 créant l Agence pour l évaluation de la qualité de l enseignement supérieur organisé ou subventionné par la Communauté française.
Préambule (2): Afin d organiser l évaluation interne la Direction de chaque institution a dû désigner: un coordinateur de la qualité une Commission d évaluation interne (CEvI)
Préambule (3) : A la HEPCUT: Rôle du coordinateur: implanter et gérer la démarche qualité au sein de l institution, organiser le travail des groupes, garantir sa cohérence, l archiver, relayer auprès de la Commission et des instances... Rôle de la CEvI: rédiger le rapport confidentiel d évaluation interne remis uniquement à la Direction et au Président de l Agence, impulser et orienter la démarche...
Préambule (4): En dehors des indicateurs sélectionnés, aucune méthodologie spécifique n est imposée par le décret du 14 novembre.
Méthodologie - approche (1) HE de l Enseignement provincial du Hainaut avec un Projet Pédagogique Social et Culturel (PPSC) spécifique existence d outils de réflexion et d analyse déjà disponibles comme le texte du PPSC, le rapport d activités et une démarche d enseignement ayant des missions et des caractéristiques propres 6 départements (économique, pédagogique, social, technique, agronomique, paramédical) 29 formations avec des centres d intérêt extrêmement différents et des préoccupations diverses
Méthodologie - approche (2) 5 sites (Charleroi, Montignies-sur-Sambre, Marcinelle, Tournai, Ath ) éloignés de plusieurs kilomètres manque évident de lien entre les implantations du fait de la distance et des orientations de formations souhait de développer un mouvement fédérateur autour de la notion de qualité
Méthodologie - approche (3) DONC une méthodologie prédéfinie ne semblait pas appropriée à la HEPCUT, recherche d une méthodologie adaptée au contexte de notre HE et à nos besoins, rôle des outils existants (Projet Pédagogique, rapport d activités, etc). Choix d une méthodologie contextualisée!
Méthodologie - approche (4) Construction d une méthodologie proche du programme européen SEQuALS Supporting evaluation of quality and learning of schools Entrée dans une «school-based evaluation» «un environnement scolaire d évaluation continue» c est-à-dire orientée «évaluation interne + évaluation externe»
Méthodologie - approche (5) OBJECTIF GENERAL: développer une «learning organisation» «organisation apprenante» c est à dire «une institution dans laquelle chacun, à tous les niveaux, tant individuels que collectifs, n a de cesse d augmenter ses capacités à produire des résultats qui lui importent vraiment».
Méthodologie - approche (6) POUR créer une réelle culture d établissement fondée sur un souci commun de la qualité, entrer dans la spirale de l amélioration continue, dans la transparence!
Méthodologie - approche (7) La méthodologie qualité SEQuALS propose de contextualiser l évaluation et de travailler à partir de à travers des DOMAINES CLES (Key areas) POINTS d ENTREE
Méthodologie - approche (8) DOMAINES CLES HEPCUT Communication externe, accueil Communication interne Interaction avec l extérieur Programmes et cours Apprentissage et enseignement Gestion, administration Aide aux étudiants Leadership Culture d établissement
Etapes (1) Etapes de la démarche SEQuALS A. Observation B. Choix d un objectif C. Choix d un domaine clé et de points d entrée D. Groupes de réflexion E. Etat des lieux F. Enquête, indicateurs, évaluation interne G. Analyse, suggestions H. Action I. Evaluation externe
Etapes (2) Une fois ce choix méthodologique réalisé, mise en place de notre bonne pratique: EDS-étudiants Evaluation du degré de satisfaction des étudiants A partir du 8 avril 2003 A. Observation B. Choix d un objectif
Etapes (3) A. Observation: une constatation, la diminution sensible de la population toutes catégories confondues B. Objectif: redresser cette situation et obtenir une augmentation de la population à moyen terme
Etapes (4) A. Observation B. Choix d un objectif C. Choix d un domaine clé et de points d entrée: Communication externe, Accueil C est à dire un domaine clé... qui concerne toutes les catégories d intervenants (direction, enseignants, administratifs, étudiants )... dans lequel la HE connaisse des points forts observables.
JPO Rhétos Pub Inscription Communication externe - Accueil 1er contact Salon Visites Accueil 1er cours brochures Site Domaine clé Communication externe-accueil
Etapes (5) A. Observation B. Choix d un objectif C. Choix d un point d entrée D. Groupes de réflexion Organisation de «groupes de réflexion» sur base volontaire et bénévole Actuellement ( octobre 2005), 34 membres du personnel tant enseignant qu administratif travaillent dans 7 groupes de réflexions...
Etapes (6) A. Observation B. Choix d un objectif C. Choix d un point d entrée D. Groupes de réflexion E. Etat des lieux F. Enquête, indicateurs G. Analyse, suggestions
F.Q1 JPO F.Q3 Rhétos Inscription Accueil E. E. Ouverture Visibilité Accueil Documentation.Q2 Salon E. E. Pub brochures Visites site
Etapes (7) A. Observation B. Choix d un objectif C. Choix d un domaine clé et de points d entrée D. Groupes de réflexion E. Etat des lieux F. Enquête, indicateurs, évaluation interne G. Analyse, suggestions H. Action I. Evaluation externe
Actions et audits F.Q1 JPO F.Q2 PUB F.Q3 Salons I I.b. Audit externe: Ouverture Visibilité Accueil Documentation CAF G. Analyse et Suggestions H. Action I.a. Audit interne
Etapes (8) Méthodologie rigoureusement BOTTOM UP!
Etapes (9) A partir du 1er septembre 2004, sur proposition de la Commission d évaluation interne Nouveau domaine clé Interaction avec l extérieur Nouveaux points d entrée Mobilité, Stage, TFE
F.Q1 Jur y Suivi TFE Préparation E. Archivag e Mobilité Critères évaluation E. Visites Choix du lieu Rapport avec l entreprise F.Q3 Bourses Forme Europas Aides s Partenaires E. F.Q2 Stage
Outils (1) Entre le 8 avril 2003 et le 1er octobre 2005 7 groupes de réflexion 34 membres des groupes 12 questionnaires rédigés et mis en forme +/- 40 réunions par an plus de 3500 questionnaires distribués près de 2200 questionnaires traités (logiciel Sphinx)
Outils (2) Questionnaire PUB Questionnaire JPO Questionnaire JPO Interne étudiants Questionnaire JPO Complémentaire Questionnaire Salons Questionnaire argumentaire Questionnaire étoile Questionnaire Stage-TFE - Argumentaire Questionnaire Mobilité 2005 non institutionnelle Questionnaire Leonardo information Questionnaire Leonardo préparation Questionnaire Leonardo Debriefing
Résultats (1) Sommes-nous entrés dans le processus de l amélioration continue?
Résultats (2) Deux exemples concrets: A. le fonctionnement du groupe Mobilité 1 ) État des lieux de la mobilité
Etat des lieux de la mobilité institutionnelle en date du 1 er février 2005 Technique Paramédical Agronomique Economique Social Pédagogique Echanges non non non non non Séjours linguistiques non non non 2 ème année CE, 2 ème année SD : séjour d une semaine en Angleterre 3 ème année CE, 3 ème année SD : séjour d une semaine aux Pays-Bas Activités diplomante non non Voyages d études (plusieurs jours) Ing. Chimiste (Florence, visite usine) Aéronautique (WAN) A partir du mois de novembre 2004 Parfois mais difficile à mettre en place. Grande demande des étudiants ; initiative d étudiants mais peu efficaces. En Horticulture, voyage en Espagne (Mr Sirjacobs) Informatique (Nice, Poitiers, ) Immobilier (Venise, Amsterdam) AS,CS : Voyage aux Pays-Bas, séjour linguistique à Amsterdam, Montpellier, Luxembourg, Communication : Lomel Semaine d intégration ( ES) Voyage au Maroc + projet social (3ES) IP : une semaine à Virton 3IP : Strasbourg Visite d entreprise, d administration, de musée, voyage d un jour, etc Participation à des conférences Oui selon les opportunités Aéronautique (Paris, Salon) Ing. Chimiste (5 visites au cours du Master) Forum de l entreprise Visite adaptée aux besoins (ex : sevrice d hôpital) 2 ème et 3 ème année En moyenne, 2 visites sur la durée du Baccalauréat Oui Organisée au coup par coup selon les opportunités; parfois demandée par les étudiants Visite d entreprises, de fermes, station d épuration, entreprises agroalimentaires Oui Organisée au coup par coup selon les opportunités; parfois demandée par les étudiants Selon les opportunités SD (Allemagne) Informatique Immobilier (Batibouw, bureau d expertise ) Selon les opportunités Droit :conférence au Parlement, Séminaires Fortis CE,SD : cinéme Communication : Voyage à Maastricht Conférence multimédia avec Québec Groupes d entraide (I. Abras) Organisation de conférence Stages sportifs Barrage Eau d Heure Participation et organisation de conférences
Etat des lieux de la mobilité non institutionnelle en date du 1 er février 2005 Technique Paramédical Agronomique Economique Social Pédagogique Leonardo 2 projets pour non non 1 projet pour l année 1 projet pour l année non l année 2004-2005 TEMPLE (aréonautique MESIC (chimie) (Sienne, Dresden) Candidature projet ALESE en 2005-2006 2004-2005 TEMPLE ALESE en 2005-2006 Partenaires : Pays-Bas, Espagne, France, GB, Allemagne, Irlande,Italie, Turquie 2004-2005 Candidature pour 2005-2006 Erasmus étudiant non non Turin, Bordeaux, Valladolid, Leon, +/- 6 mois rédaction du TFE sur place non oui (France) oui Erasmus enseignant non non oui (Turin, Bordeaux) DESS en fermentation non non oui (Barcelone) Stage à l étranger Oui oui oui oui pas en 2005 Oui aux frais de l étudiant Erasmus Belgica non non non En préparation non non Erasmus Mundus non non non non non non Autre projet non non Chine 2 candidats maximum pas de soutien financier soutien du Conseil social intervention = logement + formation Programme de coopération Tunisie Convention UQAM pour échange d enseignants et d étudiants (+/- 6 mois Projet transquébec Europass oui non non oui oui non Programme avec Québec
Résultats (3) 2 ) La «carte de la mobilité» HEPCUT
F.Q1 F.Q2 Stage/TFE F.Q3 Programmes européens (Leonardo) E. Vers la Flandre libr e Mobilité en vue d une formation Erasmus Belgica E. ECTS Erasmus HEPCUT Trialog Mobilité institutionnelle Voyag es d étude s Séjours linguistiques obligatoires Mobilité des enseignants Formatio n à l étranger E. Erasmus Échange s Visites d entreprises et institutions Visites de stage E. F.Q4
Résultats (4) 3 ) Questionnaires et enquêtes en cours Q1 Perception des programmes européens (2ème année) PERCEPTION Leonardo Q2 Degré de satisfaction quant à la préparation au stage à l étranger (3ème année fin 1er mois de stage) PREPARATION Leonardo Q3 Degré de satisfaction global (débriefing retour de stage) DEBRIEFING Leonardo Q4 Mobilité institutionnelle et mobilité enseignante (mai 2005)
Enquête «PERCEPTION» 2003: Durée du stage obligatoire 3 ème année 11,5% 7,7% 7,7% 12 semaines 19,2% 13 semaines 14 semaines 15 semaines je ne sais pas exactement 53,8% Tableau 2-2004 : durée du stage Modification des systèmes d information 9,7% 6,5% 6,5% 12 semaines 13 semaines 14 semaines 15 semaines je ne sais pas exactement 77,4%
Enquête «PREPARATION» satisfaction préparation GLOBALE 2003-2004 18,2% 9,1% Pas du tout satisfait Plutôt pas satisfait Plutôt satisfait 36,4% Satisfait 36,4% Très satisfait Dossier d information Autre horaire de réunion Rencontres individualisées Travail linguistique personnalisé satisfaction préparation GLOBALE 2004-2005 16,7% 58,3% 25,0% Pas du tout satisfait Plutôt pas satisfait Plutôt satisfait Satisfait Très satisfait
Enquête «PREPARATION» satisfaction information financière 2003-2004 18,2% Pas du tout satisfait 45,5% Plutôt pas satisfait Plutôt satisfait Satisfait 36,4% Très satisfait Meilleure info Dossier Excel Exemples concrets satisfaction information financière 2004-2005 16,7% 33,3% Pas du tout satisfait Plutôt pas satisfait Plutôt satisfait Satisfait Très satisfait 50,0%
Résultats (5) B. Le degré de satisfaction des visiteurs JPO: la signalisation et le fléchage
Degré de satisfaction signalisation JPO 2003 Appréciation signalisation/ fléchage JPO 2004 très satisfait 53,0% plutôt satisfait 22,5% pas du tout satisfait 18,5% inexistante 6,0% Excellente 24,0% Bonne 52,0% Moyenne 19,9% Passable 3,5% Mauvaise 0,6% Inexistante 0,0% Appréciation signalisation/fléchage JPO 2005 Excellente 24,0% Bonne 64,8% Moyenne 8,8% Passable 1,6% Mauvaise 0,8% Panneaux indicateurs MET Panneaux extérieurs Réflexion interne Participation des étudiants Inexistante 0,0%
Expériences positives et négatives (1) Des réussites, des points forts? Soutien de la part du Directeur Président. Liberté de travail et d expression tant dans les groupes que dans la Commission Sentiment d appartenir à un groupe de travail Rôle réellement fédérateur de la démarche Crédibilité des membres des groupes aux yeux des collègues...
Expériences positives et négatives (2) Des réussites, des points forts? La démarche spécifique et originale de la HEPCUT devient progressivement un modèle (participation à des séminaires, des colloques et des conférences) Reconnaissance par nos pairs Sentiment de «faire avancer» certaines choses au sein de l institution et surtout... dans l ensemble, le point fort de l institution est son «matériel» humain!
Expériences positives et négatives (3) Des difficultés, des écueils? Manque de crédibilité de la démarche aux yeux de certains et résistance en fonction d expériences antérieures négatives. «La qualité ce n est pas important, c est secondaire» Difficulté d adaptation des horaires de réunion en fonction de l emploi du temps de chacun. Faisabilité difficile de certaines suggestions pour des raisons budgétaires. Difficulté d implication des étudiants et du personnel administratif dans la Commission d évaluation. Difficulté dans la distribution des questionnaires. Pérennisation de la méthode?
Conseils Avoir l appui de la direction! Demander du temps! Créer une ambiance propice! Expliquer la démarche à tous et partout! Prendre du temps! Diffuser les résultats à tous et partout! Ne pas se décourager si les actions correctives ne suivent pas! Avoir du temps! Être très organisé(e)! ARCHIVER!
Contactpersoon / Personne de contact Christine DEFOIN christine.defoin@hainaut.be HEPCUT Coordination Qualité 2 Square Jules Hiernaux 6000 Charleroi 071/ 531 224 0476/ 81 99 92 MERCI!