Evaluation Ex-post de Projets La Pratique de la Banque Mondiale Michel BELLIER CGEDD 24 juin 2015 http://www.cgedd.developpement-durable.gouv.fr
Définitions L évaluation des impacts est la détermination de la manière dont une intervention évaluée affecte les résultats, que ces effets soient volontaires ou non. La bonne analyse de l impact nécessite la clarification de ce que ces résultats auraient été en l absence d intervention.* * OCDE 2
Les objectifs de l évaluation à la BM Attention de longue date de la BM à l amélioration de l impact de ses prêts et autres interventions Pratique systématique de l auto-évaluation Bilan des leçons à tirer, au niveau des projets, des programmes, entre pays Partage de connaissances Endossement des résultats Deux niveaux d évaluation des projets financés par des prêts: Rapport d auto-évaluation de la mise en œuvre et des résultats des prêts (ICR Rapport d achèvement des projets) Evaluation à posteriori des activités du groupe BM par le groupe d évaluation indépendante (IEG) 3
Un ICR pourquoi? Faire un bilan complet des performances et résultats de chaque opération Dans les six mois après la clôture de la période de tirage du prêt Tirer et diffuser les leçons de l expérience au stade du montage comme de la mise en œuvre de l opération Assurer la prise de responsabilité et la transparence pour chaque opération Fournir une méthode d auto-évaluation réaliste des performances de la BM et de l emprunteur Alimenter une base de données Consolidation des données Analyse 4 Bilans
Le Contenu d un ICR Informations générales Dates clés Notes d évaluation Performances de la BM et de l emprunteur Qualité à l entrée du projet et performance de la mise en œuvre Codification par secteur et par thème Personnel BM étant intervenu Cadre d analyse des résultats Mêmes indicateurs de performance que le dossier de présentation du projet Mise à jour de l évaluation socioéconomique Performance du projet durant la mise en œuvre Restructuration (si c est le cas) Profil des décaissements Leçons à en tirer 5
Un ICR pour qui? Audience interne Membre du CA, personnel Audience externe Gouvernements et leurs agences Parties prenantes et bénéficiaires dans les pays Grand public L ICR est automatiquement publié au moment de sa soumission au CA 6
La Préparation d un ICR Deux niveaux d évaluation ICR ou ICR à enseignements intensif Les régions de la Banque sont responsables de la rédaction des ICR Préparation par le chef de projet du moment à la BM, au sein de l unité technique ayant monté et suivi le projet Revue par un comité associant parties prenantes Banque et présidé par le Directeur pays Au titre de la qualité, attention apportée à: La qualité générale, champ et transparence La cohérence avec l agenda des résultats de la BM Les vues de l emprunteur et autres parties prenantes, qui sont sollicitées Les leçons tirées, qui sont exploitées pour la préparation de nouvelles opérations Les transferts méthodologiques au bénéfice de l emprunteur 7
La Contribution des Emprunteurs Point de vue sollicité Pendant la préparation de l ICR Sur le projet d ICR Informations sur l environnement économique, financier, social et institutionnel de l opération Point de vue sur la qualité de la contribution de la BM Commentaires sur le projet d ICR Pour les ICR-ILI, organisation d une enquête auprès des bénéficiaires et d un séminaire des parties prenantes 8
Que Dire de la Qualité des ICRs? Le groupe indépendant d évaluation (IEG) revoit tous les ICRs et les évalue ICR = exercice fastidieux prenant place après la mise en œuvre d un projet En théorie, rédaction par un tiers sous contrôle du chef de projet BM Qualité de l ICR dépendant des informations de mise en œuvre disponibles Exploitation des leçons tirées dans l ICR difficile et peu pratiquée Sauf pour l auteur de l ICR et le chef de projet! 9
Le Groupe d Evaluation Indépendant IEG en charge de l évaluation de toutes les activités du groupe BM Son Directeur rapporte directement au CA IEG vise à fournir une évaluation objective des résultats de l action de la BM, identifier les leçons à en tirer, et les disséminer Large champ d intervention 10 Revue des évaluations des projets par la BM (ICR) Revue des programmes pays (portefeuilles, priorités) Revues globales de programmes sectoriels Evaluations thématiques Revue des études Cas types de pays Méthode de travail autonome par rapport aux services BM Revue de dossiers Interviews des intervenants internes Enquêtes auprès du personnel et des pays
Pourquoi un Groupe Indépendant Conviction BM que l évaluation est un élément essentiel pour le développement de programmes efficaces Elle fournit une base objective pour apprécier les résultats, engager l institution, aider les praticiens à tirer des leçons de l expérience L indépendance de l évaluation garantit l impartialité et la transparence L évaluation systématique se focalisant sur les projets, il y a besoin d un niveau consolidant pour examiner L impact sur le pays de programmes de prêts L impact de politiques sectorielles La comparaison entre pays 11
References Handbook on Impact Evaluation, Quantitative Methods and Practices, Banque mondiale 2009 Guide pour la préparation des ICR, Banque Mondiale Annual report 2014 IEG, Banque Mondiale 12
Merci de votre attention CONTACT michel.bellier@developpement-durable.gouv.fr LIEN SUR L'INTERNET DU CGEDD http://www.cgedd.developpement-durable.gouv.fr LIEN SUR L'INTRANET DU CGEDD http://intra.cgedd.i2 Conseil général de l'environnement et du Développement durable http://www.cgedd.developpement-durable.gouv.fr