L application de la mesure d efficience en éducation Rappel : l efficience peut être mesurée par une analyse coût-efficacité, c est-à-dire la mise en relation des moyens mis en œuvre avec les résultats obtenus Exercice d application à partir d un résultat de l enquête PISA 2003 sur la culture mathématique d élèves de 15 ans
Démarche pour procéder à une analyse d efficience 1. Définir le ou les objectifs par rapport au(x)quel(s) l efficacité doit être évaluée. 2. Déterminer le ou les résultats permettant de mesurer l efficacité, conformément à l objectif ou aux objectifs définis sous le point 1. 3. Mesurer les moyens engagés pour parvenir au(x) résultat(s) recensé(s) sous le point 2 (dépenses consenties ou coûts de production des prestations). 4. Mettre en rapport les résultats recensés sous le point avec les dépenses consenties ou les coûts de production 5. Analyser les facteurs ayant un impact sur le niveau de performance ou sur les moyens engagés.
Exercice d application à partir d un résultat de l enquête PISA 2003 Définition des résultats en vue de mesurer les performances Dans l enquête PISA, la notion de culture mathématique renvoie à la capacité des élèves d analyser, de raisonner et de communiquer efficacement lorsqu ils posent, formulent et résolvent des problèmes mathématiques relevant d un vaste éventail de situations en rapport avec l espace, les quantités, les probabilités et d autres concepts mathématiques. (...) l enquête PISA cherche à déterminer dans quelle mesure les élèves possèdent des connaissances et des compétences en mathématiques et dans quelle mesure ils sont capables de les mobiliser pour résoudre des problèmes de la vie courante. Source : OCDE (2005). Regards sur l éducation. Les indicateurs de l OCDE 2005. Paris, p. 61
Les 4 composantes de la culture mathématique «L enquête PISA rend compte des résultats de l évaluation en mathématiques sur une échelle globale de culture mathématique (...) constituée des quatre composantes suivantes. - La composante «Espace et formes» porte sur les relations et les phénomènes géométriques et spatiaux et s appuie sur le programme de géométrie. - La composante «Variations et relations», qui est en rapport étroit avec l algèbre, a trait aux manifestations mathématiques de variation et aux relations fonctionnelles et de dépendance entre variables. - La composante «Quantité» concerne les phénomènes numériques, les relations et les modèles quantitatifs. Elle demande aux élèves d avoir le sens des nombres, de pouvoir les représenter et de comprendre la signification des opérations, du calcul mental et des estimations. - (...) la composante «Incertitude» a trait aux relations et aux phénomènes de statistiques Source : OCDE (op. cit., p. 61).
Les 6 niveaux de l échelle de compétence - < Niveau 1 (< 358 points) : les élèves ne sont pas capables d appliquer systématiquement les savoirs et les savoir-faire les plus élémentaires. - Niveau 1 (358-420 points) : les élèves sont capables d identifier les informations et d appliquer des procédures de routine. - Niveau 2 (421-482 points) : Les élèves ne peuvent puiser des informations pertinentes que dans une seule source d information et utiliser qu un seul mode de représentation. - Niveau 3 (483-544 points) : Les élèves peuvent choisir et mettre en œuvre des stratégies simples de résolution de problèmes - Niveau 4 (545-606 points) : Les élèves peuvent choisir et intégrer différentes représentations, dont des représentations symboliques et de les relier à des situations concrètes. - Niveau 5 (607-668 points) : Les élèves sont capables de choisir, de comparer et d évaluer des stratégies de résolution de problèmes - Niveau 6 (> 668 points) : Les élèves peuvent établir des liens entre différentes représentations et sources d information et passer de l une à l autre sans difficulté. Source : OCDE (op.cit., p. 62-63).
La mesure des moyens engagés Les moyens engagés sont mesurés par la part du produit intérieur brut (PIB) consacrée aux dépenses d enseignement primaire et secondaire I. Le PIB représente la richesse produite en une année dans un pays donné. Les dépenses d enseignement prises en considération incluent toutes les dépenses des établissements scolaires publics et privés, que le financement soit public ou privé (ménages). Il a été tenu compte ici des dépenses d enseignement primaire et secondaire I, car l enquête PISA 2003 sur la culture mathématique a été menée auprès d élèves de 15 ans, censés avoir suivi un enseignement primaire et secondaire I.
Graphique 1 : Scores moyens par pays d élèves de 15 ans en culture mathématique et pourcentage national de dépenses au titre des établissements d enseignement primaire et secondaire 1 en pourcentage du PIB (Source : OCDE, op.cit, pp. 65 et 198) Score en cult. math. 560 540 520 500 480 460 440 Grèce Japon Finlande Italie Corée Pays Bas Suisse Etats-Unis Portugal 420 Turquie 400 0 0.5 1 1.5 2 2.5 3 3.5 Dép. prim. et sec.i en % du PIB
Graphique 2 : Concept de coût (Source : Hanhart, S. 2006. Polycopié de l UF 742003. Genève: Université, FPSE, p. 60) COUT REEL = COUT MONETAIRE + COUT D OPPORTUNITE COUT MONETAIRE Ressources monétaires servant à l acquisition de facteurs de production COUT D OPPORTUNITE Coûts découlant d utilisations alternatives des ressources et correspondant aux revenus que produiraient ces ressources coûts récurrents coûts d investissement coûts individuels coûts sociaux
Tableau 1 : Grille d analyse des dépenses d enseignement selon leur nature économique (Source : Hanhart, S. op. cit., p. 47) 1. Dépenses courantes 1.1. Dépenses salariales personnel enseignant personnel administratif personnel technique 1.2. Dépenses non salariales biens et services (loyers, matériel scolaire non durable,...) transferts (bourses, allocations d études,...) amortissements et charges financières 2. Dépenses en capital terrains et viabilisation Constructions équ ipements pédagogiques, scientifiques, administratifs durables
Graphique 3 : Relation entre les performances sur l échelle pisa des élèves de 15 ans en mathématique et les dépenses des établissements d enseignement par élève cumulées entre 6 et 15 ans (Source : OCDE, op. cit., p. 174) 700 600 500 400 300 200 100 0 Score moyen 0 25000 50000 75000 100000 125000 150000 Converties en US$ sur la base des PPA
Dans le cadre d un mandat confié par la Conférence des chefs des départements de l instruction publique (CDIP), vous devez : 1. formuler des hypothèses permettant de mieux définir les facteurs influant sur l efficience des pays présentant le taux de performance moyen de leurs élèves le plus élevé (Finlande, Corée, Pays-Bas, Japon et Suisse) et 2. proposer une mesure simple de l équité de production pédagogique.