Evaluation d'un dispositif de formation Bénédicte Humbert, Directrice Isabelle Demeure, Directrice de la Formation

Transcription

1 Evaluation d'un dispositif de formation Bénédicte Humbert, Directrice Isabelle Demeure, Directrice de la Formation

2 En bref Objectifs : - Favoriser l égalité des chances dans l accès aux études supérieures longues - Développer la créativité et le goût pour les sciences en s appuyant sur une pédagogie innovante - Faire émerger de nouveaux profils de diplômés, plus diversifiés Labellisé IDEFI (Initiative d Excellence en Formation Innovante) en mars 2012 et soutenu par l Initiative d Excellence Paris-Saclay Fruit d une alliance enseignement supérieur / monde socio-économique 2

3 Principales caractéristiques Conduit à un diplôme de licence généraliste en «Sciences et Technologies» co-délivré par les universités Paris Descartes et Paris-Sud, en partenariat avec ParisTech. Formation adossée à une «résidence pour la réussite» un hébergement est proposé à tous les étudiants Fort accompagnement individualisé des étudiants Laboratoire d innovation pédagogique Petits effectifs : montée en puissance progressive 35 nouveaux étudiants /an le temps du lancement du projet, 60 nouveaux étudiants /an en à terme Valeurs : diversité, créativité, entraide, ouverture Septembre

4 Evaluation du programme Pourquoi? Répondre au cahier des charges des IDEFI et à la demande des membres fondateurs Evoluer, progresser Diffuser, essaimer Comment? 6 étapes de travail : Etape préliminaire : Définition de la question évaluative Etape 1 : Identification des parties prenantes Etape 2 : Description de leurs activités et de leurs résultats Etape 3 : Choix de 2 parties prenantes principales Etape 4 : Définition des indicateurs et des modalités de collecte Etape 5 : Choix de 5 indicateurs pertinents Etape 6 : Conception des outils de collecte des données Etape 7 : Analyse des données Septembre

5 Définition de la question évaluative (1) L Institut a été créé par cinq partenaires aux attentes différentes et poursuit des objectifs multiples. Doit-il prioritairement faire la preuve : de son innovation pédagogique scientifique? de la performance de l accompagnement d étudiants issus de milieux modestes? de sa capacité à faire travailler ensemble des institutions nombreuses et variées? de sa capacité à prendre en compte les attentes de l entreprise? de sa capacité à transmettre à la communauté enseignante nationale ses expérimentations? de sa capacité à s inscrire dans une logique d amélioration continue et d ajustements en temps réels? etc. Septembre

6 Définition de la question évaluative (2) La licence vise à former des étudiants épanouis, performants et prêts à poursuivre une filière universitaire scientifique ambitieuse. Délivrant un enseignement original, l Institut doit donc prioritairement faire la preuve de son modèle afin d essaimer ses méthodes sur d autres territoires. La question évaluative retenue est la suivante : les modalités pédagogiques innovantes employées par l Institut permettent-elles de diplômer des étudiants épanouis, performants et convaincus de l intérêt de poursuivre carrière et études dans des domaines scientifiques? Septembre

7 Etape 1 : Identification des parties prenantes 13 parties prenantes de l Institut : étudiants, enseignants, universités co-fondatrices, écoles de ParisTech, FCS Campus Paris Saclay, Fondation ParisTech et entreprises mécènes, professeurs des lycées, lycéens candidats, parrains d entreprise, tuteurs, tutelles, opérateurs, équipe de l Institut. Septembre 2015 «Une partie prenante est un acteur ou un groupe homogène d acteurs, qui contribue à l initiative par une activité et/ou qui est impacté par cette initiative.» 7

8 Etape 2 : Description de leurs activités et de leurs résultats Les activités décrivent l action concrète de la partie prenante qui contribue à l initiative. Les résultats décrivent ce que lui apporte l initiative. Ils sont le plus souvent liés à l activité produite mais peuvent être la conséquence de l action d une autre partie prenante. Exemple : Partie prenante Activité Résultats Enseignant Il conçoit des enseignements au sein d une équipe inter-établissement s Il améliore sa capacité de travail en groupe Il développe sa connaissances des autres établissements Il conçoit des enseignements interdisciplinaires Il développe une meilleure connaissance des autres disciplines Il anime les cours de façon innovante Il améliore ses compétences pédagogiques Près de 94 résultats recensés! Septembre

9 Etape 3 : Choix de deux parties prenantes principales Efforts concentrés sur les parties prenantes qui répondent à 2 enjeux : faire la preuve de l efficacité de l innovation pédagogique, dans une perspective d essaimage ; livrer au final un nombre limité d indicateurs pertinents ; Etudiants : 13 résultats Enseignants : 9 résultats «Les indicateurs sont des données chiffrées qui expriment un changement. Ils doivent être utiles, disponibles, acceptables par toutes les parties prenantes, fiables et comparables.» Septembre

10 Etape 4 : Définition des indicateurs et des modalités de collecte Groupes «Etudiants» et «Enseignants» : 67 indicateurs dégagés en visant un idéal d exhaustivité. Pour chaque indicateur, ont été proposés : Un niveau de difficulté de collecte : la donnée était-elle disponible par ailleurs ou nécessitait-elle la construction d un événement ou outil de collecte spécifique? Un membre de l équipe d encadrement responsable de la collecte ; Une régularité et un moment de l année pertinents pour la collecte. Partie prenante Etudiant Activité Résultat Indicateur Modalité de collecte Il vit au sein d un collectif Il participe à des projets Il développe son esprit de solidarité Il entreprend Nombre d heures de soutien intrapromo Nombre d étudiants qui se lancent dans la création d entreprise Difficulté de collecte Qui fournit l'indicateur? Régularité de la collecte Relevé 5 Etudiants Chaque semaine Suivi Alumni 0 à 2 Alumni Tous les ans, après la licence Septembre

11 Etape 5 : Choix de 5 indicateurs pertinents et conception des outils de collecte Indicateurs retenus : 1. Pourcentage d étudiants déclarant avoir pris du plaisir à étudier grâce à la pédagogie ; 2. Pourcentage d étudiants ayant construit un projet professionnel scientifique ; 3. Nombre d enseignants ayant expérimenté des pratiques pédagogiques nouvelles 4. Nombre d outils/documents relatifs à des pratiques pédagogiques nouvelles, pouvant être diffusés, 5. Nombre et nature des compétences acquises par les étudiants ; cet indicateur est plus compliqué à mesurer; il nécessite notamment de connaître la liste de compétences qui caractérise un étudiant Villebon - G Charpak Pour chaque indicateur : - Conception de l outil de collecte: questionnaire, entretien individuel, etc. - Choix de la fréquence de la collecte - Responsable de la collecte Septembre

12 Merci de votre attention Des questions? Septembre