ÉVALUATION DES CURSUS D ÉTUDE Présentation de la démarche L esprit dans lequel l UniNE se préoccupe de qualité est présenté dans le document de référence «Développer et mettre en valeur la qualité : une exigence partagée» (avril 2010). Pour chacun des principaux axes concernés (les cursus, l enseignement, la recherche, les services), des documents complémentaires précisent la mise en œuvre de la démarche. Le présent document concerne spécifiquement l évaluation des cursus : son but est de préciser le déroulement des travaux à mettre en œuvre. Sa fonction est celle d un document-guide qui expose de manière succincte les principales étapes de la procédure. Secteur Qualité secteur.qualite@unine.ch www.unine.ch/qualite Janvier 2013
BREF RAPPEL DE LA PERSPECTIVE ADOPTÉE Sans reprendre l exposé du cadre et des raisons de l évaluation des cursus, nous relevons ici les éléments les plus importants pour entreprendre les travaux attendus avec une compréhension partagée du sens de la démarche. L intention générale L intention poursuivie par cette évaluation des cursus est résumée dans ces quelques lignes extraites du document susmentionné : «Afin d assurer la solidité et l attractivité de ses cursus, l UniNE veut porter une attention particulière à leur qualité, par des mesures de soutien et d évaluation, ainsi que par une mise en valeur des compétences acquises par les étudiants au terme des formations proposées. L adéquation des cursus aux attentes des étudiants et des professeurs ainsi qu aux besoins des milieux académiques et professionnels sera au cœur des démarches d évaluation des cursus.» (p. 4). Les principaux objectifs L évaluation des cursus s attachera à : mettre en évidence les caractéristiques et les points forts des cursus considérés analyser l évolution des effectifs d étudiants inscrits dans un cursus ou un programme examiner le contenu et la cohérence des cursus apprécier les connaissances et les compétences acquises analyser l adéquation des ressources et des infrastructures disponibles Un souci d économie : définir des priorités Ces objectifs n ont pas tous le même degré d importance ; une pondération est à établir, des priorités sont à définir. Cette première étape du travail est cruciale : elle est décrite dans l annexe «Définir les priorités». L attention aux questions jugées prioritaires reflète un souci d économie ; l intention est d éviter la collecte planifiée et systématique de données qui n intéresseraient que peu les personnes impliquées dans un cursus. Nous souhaitons par-là garantir la pertinence des données recueillies et en dernier ressort leur utilité. Un souci d efficacité : tirer parti de l évaluation Les mesures et recommandations issues de l évaluation des cursus pourront porter notamment sur : la mise en valeur des cursus ou programmes de formation, pour en faire mieux connaître les orientations spécifiques, tant scientifiques que pédagogiques ; l adaptation des programmes d enseignement ; les conditions de formation et les ressources allouées aux cursus. CHOIX DES CURSUS À ÉVALUER Le but des évaluations des cursus est de contribuer à la qualité de l ensemble des formations offertes à l UniNE. Au cours de chaque année académique, deux cursus sont évalués. Le choix des cursus à évaluer est effectué en fonction des besoins exprimés par les professeurs responsables d un cursus. Sur la base d une consultation préalable, le Secteur Qualité propose aux décanats et au rectorat à la rentrée de chaque année académique un calendrier des évaluations, en précisant les motifs et les objectifs prioritaires de chaque évaluation. Si une modification est demandée, le Secteur Qualité, en concertation avec les responsables des cursus concernés, établit un nouveau calendrier. Page 2
Le Secteur Qualité peut apporter son soutien à l évaluation partielle d un cursus selon des modalités ad hoc si les responsables en formulent la demande. Afin de garantir la prise en compte de toutes les formations de l UniNE, un cursus ne peut être évalué qu une seule fois sur une période de dix ans. RESPONSABILITÉS Lorsque le choix d un cursus à évaluer est confirmé, le doyen de la faculté constitue un groupe de travail, en concertation avec les professeurs concernés, le responsable du cursus et le Secteur Qualité. Il délègue ensuite la mise en œuvre de l évaluation à la personne qui présidera le groupe de travail en principe le ou la responsable du cursus. Le groupe de travail comprendra : - un membre du décanat - le ou la responsable du cursus ou du programme - les membres du corps professoral qui enseignent dans le cadre du cursus, ou une partie d entre eux - un ou des représentants du corps intermédiaire - un représentant du personnel administratif (par ex. conseiller aux études ou secrétaire d Institut) - un ou deux représentants des étudiants Un membre du Secteur Qualité participe aux séances du groupe de travail et apporte son soutien au déroulement des travaux. DÉROULEMENT GÉNÉRAL Etape 1 : Définir les priorités Lors d une séance initiale, le groupe de travail s attache à définir les objectifs prioritaires de l évaluation du cursus considéré. Pour ce faire, il élabore un questionnement «sur mesure» adapté aux spécificités du cursus, en s appuyant sur le document de travail en annexe «Définir les priorités». Les questions énumérées dans ce document seront modifiées et complétées afin d assurer leur pertinence et leur adéquation aux objectifs prioritaires de l évaluation. Une hiérarchisation permettra d écarter les questions qu il n est pas utile de retenir. Sur la base des questions définies par le groupe de travail, le Secteur Qualité élabore un plan d action ad hoc. Celui-ci précise qui doit être consulté, sur quels objets, de quelle manière et à quel moment, et définit une planification des différentes enquêtes et consultations. Le plan d action fixe également l organisation du travail, en particulier la répartition des tâches entre les membres du groupe de travail et le Secteur Qualité. Le projet de plan d action est adressé au groupe de travail qui vérifie si les investigations proposées sont les plus judicieuses pour recueillir les données et avis attendus, et si la planification d ensemble paraît adéquate. Une fois accepté par le groupe de travail, le plan d action sert de guide pour la mise en œuvre des travaux. Etape 2 : Recueil, analyse et interprétation des données Selon la nature des questions prioritaires retenues, la durée de cette étape peut varier. En principe, elle devrait pouvoir se dérouler sur trois mois. C est durant cette période que sont effectués le recueil des données utiles ; l analyse de documents relatifs au cursus ; la réalisation d enquêtes par questionnaires ; la conduite d entretiens individuels ou de groupe; les analyses statistiques. Page 3
Au cours de cette période, le Secteur Qualité fournit au groupe de travail une information régulière sur l avancement des travaux et veille à la mise en commun et à la gestion des données progressivement réunies. Au terme de cette étape, le groupe de travail se penche sur l ensemble des données réunies afin d en élaborer une interprétation commune et d en tirer les conclusions et recommandations qui s imposent. Le but est d aboutir à un consensus sur les principaux éléments qui devront être mis en évidence dans le rapport d évaluation. Etape 3 : Rédaction d un projet de rapport d évaluation La rédaction du rapport d évaluation est placée sous la responsabilité de la personne qui préside le groupe de travail et confiée au Secteur Qualité. Le plan de ce rapport sera précisé, mais d une manière générale, il comprend : une introduction, qui situe le cursus dans son contexte, les objectifs prioritaires assignés à son évaluation, le fonctionnement du groupe de travail et le déroulement des travaux une présentation des données recueillies et analysées une synthèse des résultats les recommandations et propositions qui en découlent. Le projet de rapport d évaluation ne dépassera pas 10-15 pages, et sera accompagné d annexes. Etape 4 : Adoption du rapport final d évaluation par le groupe de travail Lors d une séance conclusive, le groupe de travail discute le projet de rapport et y apporte les modifications qu il juge nécessaires. Il veille en particulier à la pertinence des recommandations et propositions qui découlent de l évaluation. Une version finale du rapport d évaluation est établie et adoptée. Etape 5 : Mise en consultation du projet de rapport auprès de pairs externes (experts) Le rapport d évaluation est adressé à quatre professeurs non impliqués dans le cursus considéré. Ce regard externe est demandé à deux professeurs de la faculté et à deux professeurs provenant d une université suisse ou étrangère (européenne). Ces pairs transmettent par écrit au Secteur Qualité leurs commentaires sur la démarche adoptée et les analyses effectuées, avec une attention particulière à l adéquation des conclusions qui en sont tirées. Au besoin, une visite des deux experts externes est organisée, afin de leur permettre de compléter leur appréciation du rapport d évaluation en rencontrant certains de ses acteurs. Dans ce cas, le déroulement et les modalités de la visite sont définis à l avance. Les conclusions des experts externes sont communiquées aux membres du groupe de travail. Etape 6: Communication du rapport d évaluation Le rapport est soumis au doyen en vue d une présentation au Conseil de faculté. Il est également transmis au rectorat qui en prend connaissance et décide d une éventuelle suite à donner aux recommandations et propositions de mesures issues de l évaluation. Le rapport d évaluation est rendu public sur le site internet du Secteur Qualité. Etape 7 : Suivi de l évaluation Un an après la conduite de l évaluation, le doyen et le responsable du cursus établissent à l intention de la vice-rectrice en charge du Secteur Qualité un bilan relatif à l évolution du cursus et aux effets des mesures adoptées. Page 4
ANNEXE Ce document s adresse aux groupes de travail constitués pour l évaluation des cursus. Il vise à faciliter la tâche initiale qui consiste à examiner ce sur quoi il convient de porter l attention, puis à définir des priorités. Sur la base des objectifs qui figurent dans le document d orientation: «Développer et mettre en valeur la qualité : une exigence partagée», nous proposons ci-dessous un premier catalogue des questions que l évaluation prendra en considération. Dans un premier temps, il s agit de compléter les tableaux ci-dessous en y ajoutant toute question que le groupe de travail jugera pertinente. Dans un deuxième temps, le groupe de travail déterminera les questions prioritaires de l évaluation qui bénéficieront d une attention particulière lors de l enquête : Objectifs Questions (exemples) Mettre en évidence la qualité du cursus considéré Les documents qui présentent le cursus décrivent-ils de manière adéquate les objectifs de formation? Mettent-ils suffisamment en évidence les points forts du cursus? Les étudiants engagés dans le cursus perçoivent-ils ces points forts? Ces points forts sont-ils suffisamment communiqués et connus à l interne de l UniNe et à l externe? Quelles sont les caractéristiques du cursus et les pratiques de formation particulières qui pourraient être mises plus en évidence? Autres questions: Analyser l évolution des effectifs d étudiants Nombre d étudiants inscrits dans le cursus Analyse par genre Evolution des effectifs Provenance des étudiants (géographique, disciplinaire) La durée effective des études Le nombre d abandons Examiner le contenu et la cohérence du cursus Quelle est l originalité et la spécificité du cursus dans le contexte romand, suisse et international? Quelle est la réputation du cursus? Le projet de formation est-il suffisamment explicité? Les options pédagogiques sont-elles cohérentes? La part de cours à choix offert aux étudiants est-elle judicieuses? La répartition des cours généraux et des cours plus spécialisés est-elle adéquate? Page 5
Evaluer les connaissances et les compétences acquises Les acquis correspondent-ils aux attentes : - des enseignants? - des étudiants? - des milieux professionnels? Ces acquis sont-ils adéquats pour la poursuite des études? (master, doctorat, formation continue) Les acquis ouvrent-ils aux étudiants les perspectives professionnelles souhaitées? Les modalités d évaluation des connaissances et des compétences sont-elles adéquates? Evaluer les modalités d initiation à la recherche Le cursus accorde-t-il une place suffisante à la formation à la recherche? Quels sont les enseignements qui prennent plus particulièrement en charge cette initiation à la recherche? A quel moment du cursus cette initiation à la recherche trouve sa place? Analyser l adéquation des ressources Le nombre d enseignants et de collaborateurs scientifiques qui interviennent dans le cursus et le taux d encadrement L appui administratif et technique : - du secrétariat des instituts - du secrétariat de la faculté - des services centraux Analyser l adéquation des infrastructures et des moyens disponibles Les espaces d étude et de travail Les ressources documentaires Les outils et supports informatiques Page 6