DR Stratégie d amélioration continue et évaluation participative DR R.Vezin Peter SZERB chargé de mission développement durable, évaluation
I. PARTIE: INTRODUCTION Contexte SOMMAIRE II. PARTIE: STRATEGIE D AMELIORATION CONTINUE Stratégie d'amélioration continue Éléments constitutifs : 1. l'observation territoriale 2. le suivi 3. et l'évaluation participative III. PARTIE: EVALUATION PARTICIPATIVE EN RHÔNE- ALPES Définition, préparation et processus d évaluation Plus-value participative, utilité, communication
I. PARTIE: CONTEXTE MEEDDM : Cadre de référence national pour les projets territoriaux de développement durable (2006) PCET/A21: Cinq finalités, cinq éléments, dont l amélioration continue et l évaluation participative Référentiel pour l évaluation des projets territoriaux de développement durable (2011- sur les objectifs stratégiques)
II. PARTIE STRATEGIE D AMELIORATION CONTINUE
Stratégie d'amélioration continue (SAC) «.. apporter une amélioration de la situation initiale au regard des finalités du développement durable et, dans le même temps, améliorer les méthodes de travail pour les rendre plus ouvertes, plus transversales, plus participatives. Les avancées doivent pouvoir en être mesurées pour permettre l évolution du projet au fil du temps.» «L évaluation en continu est indissociable d une stratégie d amélioration continue.» MEEDDAT, Projets territoriaux de développement durable, éléments déterminants de la démarche & orientations et pistes pour l action, Paris, Tome 1, juillet 2006,
1 2 4 3 La route de Deming
Éléments constitutifs d une SAC 1. L'observation territoriale 2. Le suivi 3. L'évaluation mais aussi démarche qualité, etc.
1. L'observation territoriale : Définition Objectif : suivre l évolution socio-économique et environnementale d un territoire Méthode : recueil, organisation et mise à jour régulière des données socio-économiques et environnementales du territoire - indicateurs de contexte Intérêt : facilite la collecte et l analyse d informations, étapes préalables à l évaluation Productions : annuaire, rapport, «état des lieux des inégalités»
Définition 2. Le suivi : Objectif : mesurer l avancement de la mise en œuvre d une action/pp Méthode : mise à jour régulière des indicateurs de réalisation, tableau de bord - indicateurs de réalisation Intérêt : fournit de précieuses indications sur le déroulement de l action/pp, alerte et incite à évaluer les conditions de réalisation et des effets produits de l action Production: bilan, rapport d activités
3. L'évaluation (participative) Définition Objectif : mesurer les effets produits par une action/pp Intérêt : outil d aide à la décision publique, contribue à comprendre et améliorer la PP en question, aide à l ajuster/modifier/arrêter Production : rapport d évaluation Méthode: Préparation Recueil des données Analyse des données Avis évaluatif Recommandations
QUESTIONS?
III. PARTIE EVALUATION PARTICIPATIVE EN RHÔNE-ALPES
L évaluation est participative si : Définition Les différentes parties prenantes du projet évalué aussi bien les partenaires et les citoyens du territoire que les élus et les techniciens sont associées aux différentes étapes de la démarche. L évaluation n est pas participative si : «elle se limite à demander aux bénéficiaires d un programme leur appréciation sur ses effets par questionnaire ou entretien, ou à leur restituer les conclusions de l évaluation au cours d une réunion,» BARON Gaëlle, MONNIER Éric, Une approche pluraliste et participative : coproduire l évaluation avec la société civile, Revue «Informations sociales», n 110, septembre 2003, p. 2.
Préparation de l évaluation a. La commande : mandat d évaluation décision politique, légitimité, utilité b. Le pilotage : instances, rôles et composition Pilotage à quatre niveaux Commanditaire: élus - initiation/réingénierie Instance d évaluation participative: cit./tech./élu 5 étapes Animateur en évaluation: accompagne, déontologie Chef de projet : chargés de mission c. Le projet d évaluation : cahier des charges cadre technique et méthodologique, questions!!
Le processus d évaluation et sa validation (1) La méthode: - Recueil de données : analyse documentaire et statistique, questionnaire, entretiens, auditions - Analyse des données : mini dossier, réunion, focus groupe - Formulation de l avis : réponses aux questions, coproduction accompagnée par l animateur-expert en évaluation - Formulation des recommandations : coproduction avec ou sans les services concernés - Validation de l avis et des recommandations : l instance les présente au commanditaire pour validation politique
Le processus d évaluation et sa validation (2) - Degré d implication des parties prenantes : Préparation Collecte de Analyse de Avis Recommandations Suivi données données
La plus-value de la participation dans l évaluation Elle permet : de mobiliser les parties prenantes d enrichir les projets de la collectivité de partager ses objectifs et une vision globale de construire une intelligence collective et par conséquent de porter sur le projet examiné une meilleure qualité de jugement, issue d un croisement de regards pluriels meilleure connaissance des activités menées et des résultats obtenus transparence! meilleure appropriation par les acteurs des mesures préconisées par l évaluation meilleure acceptation des changements
Utilisation des résultats de l évaluation Commanditaire : validation services : mise en œuvre - Suivi de leur mise en œuvre : le service avec retour devant le commanditaire et les instances participatives - Implication des parties prenantes : communication des bilans de réalisation Communication sur l évaluation - Le rapport d évaluation : une publication systématique par la collectivité - Communication sur la démarche: documents méthodologiques
Conditions de réussite (1) Formation des acteurs Une commande politique légitime Un commanditaire s engageant au départ à prendre en compte les recommandations pour améliorer la politique évaluée Données suffisantes sur les réalisations et les résultats Une instance d évaluation pluraliste et équilibrée
Conditions de réussite (2) Une participation tout au long du processus Un champ de l évaluation et des questions évaluatives limités au regard de la durée impartie et du nombre de réunions prévues par l instance d évaluation Des questions évaluatives suffisamment «controversées» Un avis mettant en lumière les convergences, les divergences et leurs causes
DR QUESTIONS? Merci de votre attention! R.Vezin Peter Szerb peter.szerb@raee.org Portable : 06 25 23 53 33 Fixe : 04 72 56 33 53 DR