Module 5- Questions et critères de l'évaluation

1. Ce qu'il faut évaluer Questions Méthodes et et critères techniques Qualité Module 5- Questions et critères de l'évaluation

2. La (ou les) question(s) de l'évaluation • Exprime une préoccupation a l'état brut, un besoin que ressent le commanditaire (futur utilisateur ?) • S'exprime en langage courant • Est le meilleur moyen de se comprendre et de s'entendre entre commanditaire et évaluateurs • Les mises au point se font par les moyens habituels de la communication interpersonnelle (écoute, re-formulation, etc.)

3. Le processus de focalisation des questions Question de départ Méthodes et techniques utilisables Etude de faisabilité

4. Les différents niveaux d'une discussion itérative sur les questions, les méthodes, le coût, ... Partenaires Commanditaire Bénéficiaires Equipe du projet, du programme ou de la politique Equipe d'évaluation

5. Bien classer les questions Il existe trois types de questions:

6. Bien classer les questions Ces trois types de questions nécessitent des méthodes différentes:

7. Les critères d'évaluation Structure logique Impact Buts, Finalités Résultats Produits Activités Intrants Pertinence Pérennité Efficacité Réplicabilité Cohérence Efficience

8. Percoeffidu Pertinence durabilité (pérennité) impact efficacité cohérence efficience Les critères... Comment s’y retrouver?

9. Les critères... Quelle est leur utilité? • C'est le "politiquement correct" de l'évaluation, selon les standards du CAD • Dans les discussions/réflexions sur les questions d'évaluation, les critères aident à ne rien oublier et à classer les préoccupations • Une évaluation "totale" (sur tous les critères) renforce la logique des conclusions et donc leur solidité

10. Critèreset Questions: la correspondance Le programme était il bien approprié ou adéquat pour atteindre le but général poursuivi ? L'objectif est-il toujours d'actualité aujourd'hui ? Le programme correspond-il toujours aux attentes des parties prenantes? Dans la conception originelle du programme, les objectifs étaient-ils (sont-ils) cohérents entre eux, les activités prévues permettaient- elles d'atteindre les objectifs opérationnels visés, les moyens prévus permettaient-ils de réaliser les activités envisagées dans les temps impartis ? Pertinence Cohérence

11. Critères et Questions: la correspondance Comment le projet, la politique a-t-il (elle) fonctionné ? Les ressources ont-elles été bien mobilisées ? Les coûts unitaires sont-il dans les normes ? Les résultats immédiats escomptés ont-ils été effectivement obtenus et dans quelles conditions de qualité, coût et délais ? Les résultats ont-ils été à la mesure des sommes dépensées ? Les exigences contractuelles ont-elles été respectées? Efficience

12. Critères et Questions: la correspondance Efficacité Impact Quel est le niveau d'atteinte de l'objectif principal du projet ? Le programme a-t-il eu les effets attendus au niveau des bénéficiaires (correction des déséquilibres, renforcement institutionnel, modifications de comportement, etc.) ? Le programme a-t-il contribué a corriger le problème visé (niveau de pauvreté par exemple) ou à produire le développement escompté ? A-t-il des effets négatifs imprévus ? Les conséquences globales du programme sont-elles bénéfiques ?

13. Critères et Questions: la correspondance Les effets du projet ou du programme seront-ils durables ? Les mécanismes mis en place sont-ils viables ? La politique peut-elle être reproduite? A quelles conditions ? Durabilité Réplicabilité

14. Un exemple :(Projet FAC d'appui à la formation professionnelle et à l'emploi, Mali, 1999)

15. Comment? Pour donner à toutes les questions un contenu concret, il faut repartir des objectifs et des indicateurs de départ (document de projet et cadre logique). Quand le cadre logique n'existe pas, l'évaluateur doit le reconstituer.