Note de Concept l ensemble de l Evaluation de la QEDC: EVALUATION PAR LES CITOYENS DE L APPRENTISSAGE DES ELEVES Cible de la date de début de l évaluation : Q 1 2013 Introduction & Rational QEDC a été le plus important donateur pour les évaluations d apprentissage menées par les citoyennes. Nous sommes enthousiastes de mieux comprendre l efficacité de ce travail afin que nous puissions faire les décisions éclairées autour de nos investissements en cours. Une évaluation de cet ensemble pourrait aider d informer les décisions suivantes que le programme et ses subventionnés auront besoin de faire dans les prochaines années : Y a-t-il des activités qui peuvent accroitre l impact de l évaluation sur l amélioration de l apprentissage de l élève au cours du temps? Certaines de ces activités, sont-elles plus promettant que les autres (ex. la communication intensive et chère au niveau communautaire contre la communication ciblant les décideurs)? Comment les types d'évaluations effectuées évoluent au fil du temps? Par exemple, doivent-elles commencer à évaluer les niveaux supérieurs de compétences? Combien de temps doivent-elles être soutenues, et comment peuvent-elles être financées? Ces types d'évaluations, valent-elles se répliquer dans d'autres pays? Si oui, quelles sont les caractéristiques essentielles qui doivent être maintenus? Quelle est l'importance du profil de l'organisation hôte, par exemple en tant que éducateurs, chercheurs, défenseurs; en tant que local, national, régional ou un autre type d organisation? Deuxièmement, une évaluation de ces efforts pourrait également aider d informer les domaines de l éducation, transparence et la responsabilité par éclaircir sur comment exactement, et sous quelles conditions, l information mène à la prise de conscience, qui en fin mène à l action. Ce que nous savons Bien que les évaluations que nous avons soutenues aient pris une différente forme dans de différentes place, à un haut niveau elles partagent une théorie
similaire de changement. En bref, chaque avance que si l information sur l apprentissage de l élève est rassemblé et largement disséminé, ça va susciter les donateurs, gouvernements, et les communautés de mieux comprendre l état des résultats d apprentissage. Cette sensibilisation est attendue de mener, en tour, à l action de politique d améliorer l apprentissage, à travers l influence directe vers le gouvernement, ainsi qu à travers la pression pour le changement de politique de la sensibilisation communautaire. En plus, il y a une attente que la prise de conscience communautaire mènera à l action communautaire directe pour améliorer l apprentissage. Information collectée à travers la participation généralisée des volontaires, résultats disséminés à travers le média et d autres moyens. Prise de conscience de donateurs et gouvernement Prise de conscience de parent et communautaire Action de Politique de comprendre, mesurer, et améliorer l apprentissage La pression auprès des Citoyens vers le gouvernement pour le changement de politique Action direct par les parents, communautés, les ONG, d améliorer l apprentissage
Nous avons quelques preuves sur la force des relations au sein de la chaine occasionnelle ci-dessous. En particulier, nous avons appris que les évaluations ont créé une grande prise de conscience à propos de niveaux de réussite d apprentissage. Toutefois, la preuve est plus mitigée quant à savoir si une plus grande prise de conscience entraîne à son tour une action efficace pour améliorer l'apprentissage. Prise de conscience accrue. Bien que beaucoup de plusieurs facteurs y compris d autres évaluations telles que EGRA- ont joué un rôle, nous avons tant de confiance que ces évaluations ont contribué à un grand niveau de prise de conscience de la crise d apprentissage et a ouvert une nouvelle discussion sur l éducation. Les donateurs ont cité la preuve auprès de UWEZO et ASER d encadrer leurs stratégies, qui se focalisent sur l amélioration de la réussite de l apprentissage de l élève. De la même façon, les gouvernements ont cité la donnée en discussion de politique et plans. L enquête Economique de l Inde et le douzième plan de 5 ans de la Commission de Planification citent la donnée d ASER. Le parlement de Tanzanie a discuté les résultats d UWEZO. L ancien Directeur de Cabinet du Kenya été inspiré par la donnée de faire appel pour une Equipe de Travail de Lecture. La proposition de financement d Ouganda au Partenariat Global pour l Education met l amélioration de l apprentissage et la qualité en cause. Au niveau communautaire, la preuve de la prise de conscience accrue est faible. Une évaluation aléatoire d UWEZO Kenya a montré que les matériaux ont été visiblement mis en exposition dans 84% de ménage trois mois après l évaluation d UWEZO et presque 70% des parents pourraient se souvenir au moins l une des actions suggérées pour les parents d entreprendre afin d améliorer l apprentissage de l élève. Néanmoins, la plus part des parents ne pourrait pas se souvenir de résultats de l évaluation de leurs enfant. En plus, il n y avait pas de changement considérable en matière d action prise par les parents, une question dont nous adressons.
Preuve mitigée en action. Sur le front de politique, il y a les indicateurs mitigés à l égard de si la grande prise de conscience des résultats d apprentissage entraine à une action efficace pour l apprentissage amélioré. En Inde par exemple, le gouvernement a incorporé un item post budgétaire pour l amélioration de l apprentissage et a commencé de mettre en place des cellule de lecture de combler la lecture (une tentative plus tard abandonnée). En revanche, la Loi du Droit à l Education a été adopté au Parlement en 2010 articule exclusivement sur la contribution, pas les résultats. Beaucoup gouvernements étatique de l Inde implémentent des nouvelles évaluations de leur propre et adopter des nouvelles méthodologies, les deux indicateurs potentiels qu ils estiment sous pression d adresser l apprentissage. Néanmoins, il n y avait pas de mouvement considérable sur les résultats de l apprentissage dans le pays au cours de sept ans depuis le lancement d ASER. Donc il parait que certain influence politique se produit, mais pas unilatéralement, et ça n a pas été efficace. En matière de l ampleur à laquelle la prise de conscience communautaire mène à l action directe, nous n avons pas également de preuve conclusive. L étude AJ-PAL il ya quelques années à Sehore a suggéré que par simplement disséminer l information sur les résultats de l apprentissage n ont pas fait de différence-alors que la mobilisation et la formation des volontaires d enseigner les enfants a en effet motivé l action. En revanche, une étude plus récente de la Banque Mondiale a suggéré que l information sur l apprentissage plus souvent disséminé et au cours d une longue période de temps a fait impact sur l apprentissage au sein des communautés. Une évaluation n a pas révélé de l impact des efforts d UWEZO pour fournir les parents avec l information sur la performance de leurs enfants en lecture et les maths et offrir les parents avec l information sur comment ils peuvent s impliquer dans l amélioration des résultats d éducation pour leurs enfants. La mise en garde de ces résultats est que ils ont été mesurés trois mois après UWEZO a mené ses évaluations et les efforts au niveau communautaire n ont pas été complémentés par les grands campagnes de dissémination que planifie UWEZO.
En général nous avons certain information dans certains endroits sur les effets de ces efforts à grande échelle d impliquer les citoyens dans la surveillance des résultats d apprentissage. Mais notre compréhension est encore incomplète pour informer certaines décisions clés introduites au début de ce document. Questions d intérêt Face aux décisions données, ci-dessous sont quelques questions de recherche élaborées pour cette évaluation : Sur l Impact : Quel impact ont les évaluations sur : o Prise de conscience de décideurs & d autres décideurs? o Politique gouvernemental pour améliorer les résultats d apprentissage? o Prise de conscience des citoyens des résultats d apprentissage (y compris les parents, enseignants, volontaire)? o Action des citoyens pour améliorer les résultats ( y compris les parents, enseignants, et volontaires)? Sont les évaluations dans certains pays plus efficace que les autres? Si oui, pourquoi? Sur processus/implication pou les Opérations : l information collectée par les évaluations, sont- elles perçu d être légitime? Pourquoi? Comment doivent les messages aux décideurs, citoyens, etc. s encadrer de maximiser l impact? Quel rôle joue les attentes dans les manières les gens répond à la donnée et comment peut/doit le travail de messagerie fonctionne de réaligner les attentes?
Dans quelle mesure le caractère régional d Uwezo amplifie et / ou nuit à l'impact de l'évaluation? Quels sont les coûts et les effets de l'engagement des bénévoles pour les enquêtes par rapport à l'engagement d'enquêteurs expérimentés? Combien d'argent devrait être dépensé au niveau communautaire de la communication (ce qui est très intensive et coûteuse) contre la communication ciblant des décideurs? Y a-t-il des moyens créatifs et ingénieux de toucher la communauté qui ne nécessiterait pas un tel investissement? Quelle périodicité est la plus efficace? Sont des thèmes variés ou de nouvelles informations dans chaque enquête utile? Y a-t-il d'autres options pour la collecte et le partage des données (ex. du recensement, DHS, autres enquêtes nationales par sondage) mérite d'être examiné? Comme ces évaluations escaladent et augmentent (rurales vers les urbaines; premières années à des grades supérieurs), quels sont les non négociables, des éléments essentiels de ce qu'ils font? Par exemple, à quel point est "garder les choses simples" et de garder une position indépendante (contre les évaluations menées par le gouvernement)? Sur la Contribution aux bases de données probantes pour la transparence et la responsabilité Quelle est la chaîne temporaire qui relie l'information à la demande accrue de services de qualité (parmi les citoyens les plus pauvres dans les pays pauvres)? Quelles sont les incitations sociales, psychologiques et stratégiques pour les citoyens d'agir sur l'information? / Quels sont les obstacles sociaux et psychologiques qui empêchent les citoyens d'agir sur l'information (par exemple, attentes)? Quelles sont les meilleures façons de communiquer et diffuser des informations au niveau communautaire?
Délais et Etapes à Suivre Septembre: Raffiner les objectifs & questions de recherche parmi l équipe de la QEDC Octobre: Partager les notes avec la garantie pour les commentaires. Raffiner les objectifs & questions de recherche pendant la réunion des bénéficiaires à Nairobi. Que savent déjà nos bénéficiaires (base sur leur propre surveillance/évaluations) par rapport aux questions cidessus? Quelles questions de recherché serait les plus utiles aux bénéficiaires? Commencer à identifier les évaluateurs. Novembre: Décembre au Février: Raffiner la note de concept et partager avec les évaluateurs potentiels. Décider sur un évaluateur et le contracter l évaluation.