L i s t e b i b l i o g r a p h i q u e REFERENCES SUR LES INDICATEURS E t u d e G C P Nathalie Wilbeaux Actualisée en Juillet 2007 Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 1
SOMMAIRE 1 OUVRAGES ET MONOGRAPHIES... 3 2. SITES INTERNET... 6 La bibliographie centrée exclusivement sur le thème des indicateurs reste assez limitée. C est la raison pour laquelle nous citons des références plus générales sur la planification, suivi & évaluation qui incluent des passages intéressants sur les outils «indicateurs». Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 2
1 OUVRAGES ET MONOGRAPHIES Agence canadienne de développement international (1997), Manuel pour les projets. Pourquoi et comment utiliser des indicateurs tenant compte des écarts entre les hommes et les femmes, Québec. Ce manuel aborde les principales façons d utiliser les indicateurs tenant compte des écarts entre les hommes et les femmes et guide au meilleur choix des catégories d indicateurs à utiliser. Beaudoux E., de Combrugghe G., Douxchamps F, Gueneau M-C., Nieuwkerk M., (1992), Cheminements d une action de développement. De l identification à l évaluation, L Harmattan, Paris. Il s agit d un document d orientation méthodologique pour appuyer les ONG dans la mise en oeuvre de leurs actions. Il rassemble donc un certain nombre d idées, de méthodes et d outils pouvant servir aux ONG engagées dans des actions de développement. La deuxième partie de chaque chapitre est consacrée aux démarches et outils parmi lesquels figurent les indicateurs. Bernoux J-F. (2004), social, Dunod, Paris. L évaluation participative au service du développement Explorant les influences de l évaluation et leur portée dans la construction des projets sociaux, l auteur propose une méthode d évaluation participative transposable à de nombreuses configurations. La construction d indicateurs liés à un projet de développement social est développée. Bertrand J.T., Magnani R.J., Knowles J.C., Manuel d indicateurs pour l évaluation des programmes de planification familiale, Office de la population, Agence des Etats-Unis pour le développement international. Le manuel présente une liste détaillée des indicateurs utilisés couramment pour évaluer les programmes de planification familiale dans des pays en développement. Les objectifs spécifiques des auteurs ont été de distinguer les divers niveaux nécessitant des indicateurs d évaluation de la planification familiale; de compiler les indicateurs jugés les plus utiles pour l évaluation des programmes de planification familiale; de définir ces indicateurs pour harmoniser les termes entre les divers programmes, pays et bailleurs de fonds et, enfin, de promouvoir l évaluation des programmes en faisant connaître les indicateurs et en facilitant leur utilisation. CIEDEL (juin 1999), «Guide méthodologique. L évaluation de l impact. Définition et mise en place d indicateurs d impact», Fonds pour la promotion des études préalables, études transversales et évaluations (F3E). Guide méthodologique constitué de 9 fiches thématiques précisant les terminologies et portant sur les modalités d évaluation de l impact. Davies R. and Dart J. (2005), The most significant change (MSC) technique. A guide to its use. Ce document est disponible sur le site http://www.mande.co.uk/docs/mscguide.htm. Ce guide met à notre disposition une description étape par étape de la technique des histoires de changement développée par un consultant en matière de suivi & évaluation au Royaume Uni et d un consultant en évaluation en Australie. Cette technique est présentée comme une alternative à l élaboration d indicateurs. Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 3
Dias Da Graça P. et Sauvageot C. (2005), Indicateurs pour la planification de l éducation pour les populations rurales: un guide pratique, FAO-UNESCO-IIPE, Institut international de planification de l éducation, Paris. Ce guide, qui se base sur différentes expériences, décrit les principes et les techniques à utiliser pour fabriquer des outils spécifiques de suivi et de pilotage des stratégies relatives à l enseignement en milieu rural. Il répond à deux préoccupations essentielles de comment contrôler et suivre la mise en place des actions de réduction des disparités et comment mesurer simplement, mais de manière rigoureuse, les progrès réalisés par rapport aux objectifs poursuivis. Il porte, plus spécifiquement sur l élaboration d un ensemble cohérent d indicateurs constituant un véritable tableau de bord des stratégies nationales d éducation pour les populations rurales. Estrella M. (sous la direction de) (2004), L évaluation et le suivi participatifs. Apprendre du changement, CRDI-Karthala, Paris. Sur base de 12 études de cas, cet ouvrage offre une étude approfondie de la pratique du suivi et de l évaluation participatifs, de quelques-uns de ses principes, approches et défis. Dans chacune des expériences intervient la mise en œuvre des indicateurs. Certaines expériences utilisent des indicateurs prédéterminés, d autres élaborent leurs propres critères. Il s agit d une des rares sources francophones qui aborde les critères SPICED. Funnell, Sue C. (automne 2000), Developing and using a program theory matrix for program evaluation and performance monitoring, New Directions for Evaluation, n 87. L auteur examine les principales caractéristiques de la méthode de la théorie des programmes et montre comment en améliorer l utilité pour le suivi et l évaluation: en intégrant les informations relatives au contexte du programme, en définissant les critères de réussite et des comparaisons afin de juger et d interpréter les informations relatives à la performance, et en désignant les sources d information sur la performance. Gasser R., Küchli C., sous la direction de Wieser R., (1999), Indicateurs et questions-clés, cahiers de la série planification, suivi, évaluation et réalisation, Direction du développement et de la coopération, Berne. Ce manuel ne contient pas de listes d indicateurs parmi lesquels chacun pourrait sélectionner à loisir. Son but est autre, il consiste à encourager les parties prenantes de projets ou de programmes de coopération internationale à poser les questions clés pertinentes et à définir les indicateurs appropriés. Gosparini P., Russo L., Sirtori M., Valmarana C., (November 2002) The monitoring and evaluation manual of the forum solint, Development Researchers Network (DRN). Ce manuel décrit les méthodes de suivi & évaluation utilisées par les principaux bailleurs de fonds et fournit aux ONG des instruments opérationnels pour renforcer leurs capacités en ce domaine. Le chapitre 2 aborde notamment les principaux concepts et outils relatifs aux processus de suivi & évaluation. Guijt I., Woodhill J. (2003) Pour une gestion orientée vers l impact. Guide pratique de suivi-évaluation des projets de développement rural, Fonds International de Développement Agricole (FIDA), Rome. Ce guide est composé de huit modules indépendants. Chacun de ces modules donne des conseils très détaillés sur la façon de mettre en place et d utiliser un système de suivi & évaluation et de réaliser le recueil et l analyse de l information nécessaire pour caractériser l avancement du projet et de mesurer son impact. Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 4
Hancock T., Labonté R., Edwards R., (1999) Indicators that count! Measuring population health at the community level, Ottawa, rapport préparé pour le programme national de recherche et de développement en matière de santé, Canada. Ce rapport donne un aperçu des indicateurs les plus sophistiqués pour mesurer la santé de la population à l échelle communautaire. Le rapport soulève des questions clés, décrit plusieurs indicateurs en détails, dresse la liste des critères pour la sélection des indicateurs et propose un ensemble d indicateurs de base. McGranahan D., Scott W., Richard C., (November 1990), Qualitative indicators of development, Discussion paper 15, United Nations Research Institute for Social Development, Geneva. Cette note de discussion comprend des propositions d améliorations des méthodes de suivi & évaluation utilisées en se basant sur des études de cas. Il est à noter, toutefois, que le terme «qualitatif» n est pas compris en opposition à «quantitatif» mais se réfère à un niveau adéquat de satisfaction des besoins économiques, sociaux ou/et culturels. Nations Unies, commission du développement durable, (1999) Indicateurs du développement durable. Structure générale et aspects méthodologiques, New York. Cet ouvrage porte sur une série d indicateurs qui font chacun l objet d une fiche méthodologique présentant la définition de l indicateur en question et des informations sur sa signification et son applicabilité. Roche C. (1999) Impact assessment for development agencies. Learning to value change, Oxfam Publication, Oxford. Cette monographie est le résultat d une recherche-action menée par des ONG locales et internationales basées sur quatre continents. Elle apporte une clarification pertinente sur les éléments clés d une procédure d évaluation d impact en se fondant sur des études de cas. Elle présente par ailleurs une explication illustrée sur les indicateurs de type SPICED. Shapiro J., (sans date) Le suivi et l évaluation, Civicus, disponible sur http://www.civicus.org/new/media/le%20suivi%20et%20l'evaluation.pdf Il s agit d une boîte à outils qui traite des aspects essentiels pour mettre en place et utiliser un système de suivi et d évaluation dans un projet ou une organisation. Elle explicite ce que sont le suivi et l évaluation, comment ces processus sont planifiés, comment créer un système de suivi et un processus d évaluation qui puissent s allier de manière utile. Ce dossier jette un regard sur la façon de collecter l information et sur la manière de trier les données. Verrière V., (septembre 2002) «Le suivi d un projet de développement. Démarche, dispositif, indicateurs», Europact, Fonds pour la promotion des études préalables études transversales évaluations (F3E). Ce guide a la volonté de permettre aux organisations de s approprier et de comprendre la démarche de suivi dans la conduite de projets associatifs. Une première partie s attache aux concepts alors que la deuxième est illustrative et reprend des exemples pratiques. Une troisième partie «Méthodologie de conception et de mise en œuvre du suivi» est notamment dédiée à la construction d indicateurs qualitatifs. Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 5
Voyer P., (1999) Tableau de bord de gestion et indicateurs de performance, 2ème édition, Presses de l Université du Québec, Sainte-Foy. Cet ouvrage s adresse autant aux concepteurs qu aux gestionnaires intéressés à un meilleur suivi de la performance de leur organisation. Il répond aux questions: Comment préciser et formuler les préoccupations de performance? Comment mesurer l atteinte des objectifs? Comment illustrer les résultats de façon évocatrice? Comment faire le suivi de l utilisation des ressources? Quel portrait présenter pour bien traduire les réalisations principales? Comment s outiller pour produire des indicateurs de qualité mais de façon abordable? 2. SITES INTERNET Les unités d évaluation des agences bailleurs de fonds peuvent être consultées sur le suivi, l évaluation et les indicateurs. http ://peo.asiandevbank.org/reports/index.asp http ://www.um.dk/udenrigspolitik/udviklingspolitik/evaluering/ http ://europa.eu.int/comm/scr/evaluation/index.htm http ://www.oneworld.org/euforic/nar/hoeb95.htm http ://www.ifad.org/ifadeval/ http ://www.jica.go.jp/index.html http ://www.oecd.org/dac/evaluation/ http ://www.info.usaid.govpubs/usaideval/ http ://www.worlbank.org/html/oed/index.html Des liens plus directs permettent d accéder à une information spécifique sur les indicateurs de développement : http://www.oecd.org/dac/indicators Ce site explique le noyau d indicateurs élaboré par le CAD de l OCDE pour suivre la performance et les stratégies de développement. Il contient des cartes, des graphiques et des liens vers des sources de données pour tous les indicateurs du noyau. Il présente un tableau synoptique du bien-être humain sous ses aspects économiques, sociaux et environnementaux. http://www.worldbank.org/html/oed/evaluation Ce site présente le contexte du cadre logique et de la typologie des indicateurs; décrit l élaboration et l application des indicateurs à la conception, à la supervision et à l évaluation des projets; examine les questions importantes liées au bon usage des indicateurs. Il fournit en outre des exemples d indicateurs de performance élaborés pour des projets financés par la Banque et indique comment les indicateurs sont mis au point sur la base des objectifs de développement de chaque projet. http ://www.unfpa.org/ Le Fonds des Nations Unies pour la population/division des services de supervision met à disposition une trousse d outils pour l administrateur de programme, concernant la planification, le suivi et l évaluation. L outil numéro 6 concerne les indicateurs de programme. L outil numéro 5 qui concerne plus globalement la planification et gestion des évaluations aborde également le thème des indicateurs. Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 6
http://www.cercle.lu Ce site abrite des dossiers thématiques du bureau d assistance technique du cercle luxembourgeois de la coopération qui visent à améliorer les capacités de gestion des projets des ONG. Ces dossiers se situent au niveau du cycle du projet et du cadre logique. Les indicateurs sont abordés dans les différents manuels du cycle de projet mis à disposition. Aucun dossier ne traite toutefois exclusivement des indicateurs. http://ofarcy.free.fr/documentation.php Ce site de référence est celui d Olivier Farcy, consultant en suivi-évaluation. Il recense plus de 50 documents sur le thème du suivi-évaluation et référence des liens vers des documents sur le sujet et des thématiques apparentées. Bibliographie sélective sur les «indicateurs» - Etude GCP 2003-2007- NW COTA asbl www.cota.be 7