Pourquoi mesurer l impact? Benoît Fontaine 11/02/2014

Transcription

1 Pourquoi mesurer l impact? Benoît Fontaine 11/02/2014

2 3 Cas distincts 1. Le Fonds Venture Philanthropy: euros investis dans 21 organisations. FRB soutient des org. tierces ; 2. Le projet Boost: FRB est opérationnelle ; 3. Social Impact Bonds : instrument financier Trois motivations/contextes distincts où l évaluation est clé. 2

3 1. Le Fonds Venture Philanthropy FRB soutient financièrement chaque année 1700 projets Montrer impact des soutiens Outil avec suivi rapproché des résultats mode plus proche, plus collaboratif : Fonds Venture Philanthropy; Dans contexte de plus en plus concurrentiel pour obtenir des subsides plus rares. Montrer l efficacité des associations. 3

4 Venture Philanthropie : Définition Engagement élevé ; Soutien pluriannuel ; Financement sur mesure ; Renforcement des capacités organisationnelles ; Soutien non-financier ; Mesure des performances sociales. 4

5 Ce qu apporte le Fonds de Venture Philanthropy Objectif : soutien structurel, restructuration (pression des subventions et des dons) ou croissance >< projets ; Stratégie gouvernance gestion financière, coaching direction. Soutien? maximum. consultants : au moins Financement : maximum Réseau 5

6 Ce qu apporte le Fonds de Venture Philanthropy(Suite) Mesure des résultats quantitatif qualitatif Mesure tous les 4 mois 3 ans Nombre limité d organisations 6

7 Quelques chiffres Débuts modestes : 2 organisations tests Rapport d impact décembre

8 CRITÈRES DE SÉLECTION Leadership Potentiel Besoin d amélioration structurelle impulsion Le fonds doit être capable de générer de la valeur ajoutée Mesurabilité Transparence 8

9 Après la sélection Fixer et formuler les indicateurs Rôle FRB avant convention : objectifs et indicateurs clairs et simples ; Objectif de l organisation. Mesure des efforts / de l impact tous les 4 mois. 9

10 Tableau de bord tous les 4 mois 0 Objectifs QUANTITATIFS du soutien Situation initiale Objectifs Objectif Final Impact Final Situation initiale Valeur interm.1 Valeur interm.2 Valeur interm.3 Valeur - Chiffres Réalisés Description Indicateurs 0/01/00 0/01/00 0/01/00 0/01/ #N/A Valeur interm.4 Valeur interm.5 Valeur interm.6 Valeur interm.7 Valeur interm.8 Valeur Final Impact en date Prob. de réalisation de l'objectif final Commentaires/ actions à mettre en place 0 0% 0% #N/A 0 0 0% 0% #N/A #N/A Prob. de réalisati Objectifs QUALITATIFS du soutien on de l'objectif Description Indicateurs final 0/01/00 Commentaires/ actions à mettre en place 10

11 In the past four years, VPF has been successful, reaching its transformation objective for ~80% of its portfolio 80 % OFORG. INLINEWITH KPI(DASHBOARD JUNE 13) >95 % OFORG. RECOGNIZE HIGH CONTRIBUTION OF VPF 13 Source: VPF dashboard; VPF organisations survey 2014 (n=21)

12 14 These strengths are confirmed by those who know VPF well

13 Higher engagement mentioned as #1 improvement opportunity by portfolio organizations KEY IMPROVEMENT OPPORTUNITIES 16 Source: VPF organisations survey 2014 (n=21); Portfolio organisations interviews

14 2. Boost Aider des jeunes de 15 ans issus de milieux socio-économiquement défavoriséset ayant des talentsà renforcer leurs capacités et à opérer un saut qualitatif dans leur développement scolaire et personnel, afin qu à terme ils puissent accéderà des études supérieures ou qualifiantes et réussir. Soutien 4 ans ; 140 jeunes sept. : 200 ; FRB opérationnelle ; Evaluation pour montrer l impact à nos financeurs 17

15 18 KPI: mesure deux fois par an

16 3. Social Impact Bonds Contrat souscrits par des investisseurs privés qui financent des projets d intérêt général. Dans lesquels les acteurs publics s engagent à rémunérer les investisseurs en cas d amélioration significative des résultats(chiffrés) sociaux auprès d une population ciblée. Evaluation : pour calculer le retour financier sur investissement! Pression sur l org. qui preste le service. Ces Social Impact Bonds soulèvent de nombreuses questions liées notamment à l évaluation de l impact des actions, aux secteurs dans lesquelles ce type d outil est possible. 19

17 How it works Essex sib structure Investors 1 2 CSSL and ECC enter Outcomes Contract Investors fund CSSL Social Finance Service Contracts million Board of Directors 3 1 Outcomes Contract 4 Ongoing operating funds ECC 3 4 Funds released to service providers according to Service Provider Agreement ECC returns a % of savings from reduced cost of care placements Action for Children Evolution Fund Services SIB Investors 20 Service Users

18 21 Conclusion Processus - Output - Outcome Mesure impact liée à la clarté de la définition des objectifs. Si KPI pas clair : pas commencer le projet? Focus sur quelques indicateurs limitéset s y tenir. Tableau bord de l organisation: devient outil de l org. Qualitatifs etquantitatifs -Pas addiction aux chiffres, mais ne pas les éviter non plus. Une seule méthode? SROI : expérience peu concluante. Evaluation KPI : complexe. Collaboration bienvenue, pas vécue comme contrôle ou intrusion.

19 Conclusion suite Patience : horizon 3 ans minimum mais aussi exigence. Risque! Danger : ne plus en prendre! Monitoring pour être conscient de l échec, l accepter, en parler ouvertement pour améliorer. Contrôle de la mesure en interne : pas dépendre armée d experts externes. Mesure reste payable avec les moyens humains de l organisation. Mesure régulière : Monitoring pas de temps en temps en fin projet. Car monitoring = outil d amélioration du projet ou pour arrêter à temps! Pas pour rester dans un tiroir! 22