Passeports pour le bac : Tests, résultats et analyse. Décembre

Transcription

1 Passeports pour le bac : Tests, résultats et analyse Décembre 2015 Orientation-etudes@usaintlouis.be

2 Les tests destinés à évaluer les prérequis des étudiants arrivant dans l enseignement universitaire ont vu le jour en 2003 à l initiative de l Université de Namur. Depuis lors, chaque année, ce sont plusieurs milliers d étudiants des différentes universités qui passent ce test, dans les matières concernées par leur programme de cours, puis qui s engagent dans des processus de remédiations, en fonction des résultats obtenus à ce test. Après plus de 10 ans d existence, il nous a semblé intéressant de prendre un peu de recul et d analyser, à l aide de quelques données chiffrées, l évolution et l efficacité du projet. Nous avons décidé de partir des questions et réflexions que nous nous posons régulièrement. Le niveau des étudiants est-il en baisse chaque année? Comment nos étudiants se situent par rapport aux autres établissements partenaires du projet? Les dispositifs de remédiation et d aide à la réussite sont-ils efficaces? Rappelons avant toute chose que 3 passeports sont présentés au sein de notre université : Les étudiants en Droit présentent le passeport «Lire et comprendre un texte en Droit», les étudiants de la facultés de Philosophie et Lettres ainsi que les étudiants des 3 filières POLS présentent le passeports «Lire et comprendre un texte universitaire» et, enfin, les étudiants des filières ECGE et INGE sont concernés par le passeport en «Mathématiques». 1. Le niveau des étudiants Les résultats sont très différents selon le passeport. 393 étudiants ont présenté ce passeport et, globalement, les compétences évaluées par le passeport «Droit» sont relativement bien maitrisées. La moyenne est de 12,8/20 pour la partie «Lire et comprendre» et de 12,7/20 pour la partie «Culture générale». Plus de 75% des étudiants obtiennent une note globale supérieure à 10/20. Si l on regarde un peu plus loin, les prérequis «vocabulaire» et «repères historiques» sont maitrisées par plus de 80% des étudiants, tandis que plus de la moitié maitrise les compétences «compréhension fine» et «connaissances institutionnelles». Par contre, seul un tiers des étudiants maitrise les «questions d actualité». On peut donc affirmer que, de manière générale, la majorité des étudiants qui entament leur cursus en droit maitrisent suffisamment les compétences jugées nécessaires pour mener leur projet à bien. Concernant le passeport «Lire et comprendre un texte en sciences humaines» (ci-après appelé «lire et comprendre»), le score moyen obtenu par les 214 étudiants qui l ont présenté est de 10,2/20. Le tableau de distribution de la maitrise des compétences (voir ci-dessous) nous montre que la majorité des étudiants ne maitrise pas complètement les compétences évaluées par ce passeport, notamment la compétence «compréhension en détail», qui n est pas acquise par près de 90% des étudiants.

3 Graphique 1. Répartition des étudiants USL-B (en %) pour chaque prérequis selon leur niveau de maîtrise au passeport «Lire et comprendre» Il est à noter que les résultats sont sensiblement les mêmes selon que l on observe les étudiants de la Faculté de Philo et lettres ou ceux des filières POLS. Enfin, dans le passeport «Mathématiques», présenté par 185 étudiants, la note moyenne obtenue est de 9,2/20 et moins de la moitié des étudiants ont obtenu une note supérieure ou égale à 10/20. Comme le montre le graphe ci-dessous, aucune des compétences évaluées n est parfaitement maitrisée par plus de 22% des étudiants. Graphique 2. Répartition des étudiants USL-B (en %) pour chaque prérequis selon leur niveau de maîtrise au passeport «Mathématiques»

4 2. L évolution Les étudiants sont-ils, comme on l entend souvent, de moins en moins bons, ou du moins, de moins en moins bien préparés? Les données des passeports pour le bac qui sont à notre disposition nous permettent de tracer l évolution des résultats depuis la rentrée académique de Le tableau ci-dessous indique l évolution du score moyen (sur 20) obtenu par l ensemble des étudiants aux différents passeports depuis Mathématiques Lire & comprendre Droit ,1 12, ,3 10,8 12, ,93 10,2 13, ,2 10,2 12,8 Tableau 1. Evolution des scores moyens obtenus aux tests «passeports pour le bac» depuis L évolution des résultats moyens est à analyser avec précaution. En droit, le niveau des étudiants est pour le moins très stable depuis 4 ans, avec même un «pic» à 13,2/20 en Si le score moyen au passeport de Mathématique est passé de 10 à 9,2 depuis 2012, force est de constater qu il s est maintenu autour de 10 pendant les 3 années précédentes et que la baisse de régime semble propre à l année académique On ne peut pas conclure à une chute linéaire des résultats au fil des années. Enfin, l évolution est un peu plus régulière pour le passeport «Lire & comprendre» où une diminution de 0,9 points est observée entre 2012 et Les résultats à l USL-B et ceux dans autres universités En comparant les résultats de nos étudiants aux scores obtenus par l ensemble des participants issus des autres universités (UNamur et UCL), le constat est double : D une part, de manière générale, les résultats observés à Saint-Louis et évoqué plus haut sont globalement les mêmes que pour l ensemble des participants. Le passeport «Droit» est globalement bien réussi partout, le passeport «Mathématiques» met en évidence un certain nombre de difficultés et la distribution des résultats par compétence est semblable dans les différents établissements. D autre part, la comparaison des résultats aux différentes compétences du passeport «Mathématiques» révèle que pour chacune de ces compétences, une proportion plus importante d étudiants de Saint-Louis ne les maitrise pas comparé à l ensemble des répondants. Cette différence peut atteindre 7,2% pour la compétence «Traduction d un langage vers un autre». Les résultats détaillés sont visibles sur le graphe ci-dessous.

5 12/01/16 Service d'orientation et d'aide à la Réussite - orientationetude@usaintlouis.be Et ailleurs, ça se passe comment? USL-B Général Graphe Graphes 3. Répartition 3 et 4. des Répartition étudiants (en des %) étudiants pour chaque (en %) prérequis pour chaque selon leur prérequis niveau de selon maîtrise leur niveau passeport de maîtrise «Mathématiques» à l USL-B et pour l ensemble des participants 4. L efficacité des remédiations Enfin, le Service d Orientation et d Aide à la Réussite (SOAR) met en place toute une série de dispositifs visant à permettre aux étudiants de remédier aux difficultés rencontrées. Parmi ces dispositifs, des remédiations ont lieu en «maitrise de la langue» et en «mathématiques» et le traditionnel «Blocus dirigé», organisé en décembre, à Pâques et en mai. Une collaboration entre les Université de Namur et l Université Saint-Louis, sous l impulsion de Frédéric Nils et de Gil Vertongen SOAR a récemment permis de publier une recherche mesurant l impact de ces dispositifs sur la réussite des étudiants de Saint-Louis aux examens de janvier. A partir des résultats aux Passeports pour le bac, les participants aux dispositifs cités ont été pairés avec des étudiants qui avaient le même profil (âge, genre, résultats au passeport pour le bac) et les résultats des deux groupes aux examens de janvier et à certains cours ont été comparés. Trois hypothèses ont été formulées : 1) Le score obtenu par les étudiants au test de prérequis en début d année (passeport pour le bac) prédit la performance de ces étudiants aux examens de janvier. 2) La participation aux remédiations suite aux Passeports pour le Bac influence positivement l évolution entre le score obtenu aux Passeports pour le Bac et les résultats académiques obtenus aux examens de janvier. Cette influence positive se marque davantage au niveau des examens directement liés au contenu disciplinaire des Passeports

6 3) La participation au blocus dirigé de décembre influence positivement l évolution entre le score obtenu aux Passeports pour le Bac et les résultats académiques obtenus aux examens de janvier Les principaux résultats montrent que 1) Les résultats au passeport pour le bac sont effectivement corrélés avec les résultats aux examens de janvier, et ce pour les 3 passeports. 2) Les remédiations en mathématiques ont un effet positif sur la réussite de l examen d «Economie 1», mais pas sur celui de «Mathématiques générales», ni sur la moyenne générale des examens de janvier. Les remédiations en français, elles, ont un effet positif sur la réussite de l examen de «Fondement romain du droit privé», mais pas sur l examen de «Sociologie». 3) La participation des étudiants au blocus dirigé a un impact positif sur la moyenne aux examens de janvier, uniquement pour les étudiants qui ont obtenu une note inférieure à 12/20 au passeport pour le bac. En conclusion, on peut affirmer que les résultats aux différents passeports varient fortement d une discipline à l autre, le passeport «Droit» étant relativement bien maitrisé, tandis que le passeport «Mathématiques» révèle d importantes lacunes. L évolution des résultats ne montre pas une chute drastique et régulière du niveau des étudiants. Tout au plus peut-on observer un score plus bas en 2015 pour le passeport «Mathématique». L évolution des résultats au passeport «Lire et comprendre» semble, quant à elle, plus négative. Les résultats sont comparables dans les autres universités partenaires, bien qu un pourcentage plus important d étudiants semble ne pas maitriser les compétences du passeport «Mathématique» à l USL-B. Enfin, les remédiations ont un impact positif sur les résultats à certains examens et le blocus dirigé est bénéfique pour les étudiants en difficultés au passeport pour le bac. Les discussions qui ont suivi les présentations du mois de décembre nous amènent à envisager une évolution du projet, une révision des questionnaires et une refonte des stratégies de remédiation. Les prochains mois nous permettront de retravailler l ensemble du dispositif.