Manuel sur la collecte de données / Phase Dix: Évaluer et appliquer les enseignements tirés

Photo: blogs.worldbank.org

Lors de la mise en oeuvre d’un projet, il est important de vérifier systématiquement l’état d’avancement et de recenser les points qui pourraient être améliorés pour aboutir aux résultats escomptés de manière plus inclusive, plus durable et plus efficace. Mais comment mener cette évaluation et comment en tirer des enseignements ?

Suggestions pratiques en matière d’évaluation et d’exploitation des enseignements tirés Avant de commencer, déterminez quel est l’objectif de l’évaluation, quel est le public visé, quel type d’information sera nécessaire, et quelle sera la valeur ajoutée. Utilisez les ressources en ligne disponibles détaillées dans cet article, pour orienter votre évaluation et la rendre aussi pertinente que possible. C’est lorsque vous convertissez les résultats de votre évaluation en enseignements, et que vous les appliquez aux projets en cours et à venir que vous créerez de la valeur. Le présent article liste une série d’étapes claires à suivre.

Qu’entendons-nous par évaluation ?

Dans le cadre de la gestion des programmes, nous utilisons les expressions suivi et évaluation (monitoring and evaluation–M&E) et planification, suivi, évaluation et apprentissage (planning, monitoring, evaluation and learning – PME&L) pour décrire la méthodologie utilisée pour améliorer l’efficacité et la viabilité des projets de développement. Une évaluation a pour objectif de saisir quels sont les effets réels et ce qui pourrait être amélioré la prochaine fois. C’est un moyen d’identifier les enseignements qui peuvent être tirés et utilisés lors des phases ultérieures ou dans des projets ou programmes similaires ou de plus grande envergure.

Planifier et utiliser les évaluations

Lors de la planification des évaluations, il vous faudra tenir compte des éléments suivants :

• Effectuez-vous l’évaluation vous-même ou la confiez-vous à une tierce partie ? Les risques de partialité sont écartés lorsque l’on fait appel à un intervenant externe. La plupart des bailleurs exigent que l’évaluation finale du projet soit réalisée par un intervenant externe.
• Quand devez-vous réaliser l’évaluation ? Si vous effectuez une évaluation avant le terme d’un projet, par exemple à mi-parcours, celle-ci permet non seulement de tirer des conclusions et des enseignements, mais aussi de les mettre immédiatement en oeuvre dans le projet. Il s’agit alors d’une « évaluation formative », par opposition à une « évaluation sommative » effectuée au terme d’un projet ou programme.
• Allez-vous partager les résultats de l’évaluation ? Et avec qui ? C’est généralement le bailleur qui demande l’évaluation, mais vous pouvez décider de partager les rapports d’évaluation plus largement, ou même de les rendre publics. Ils peuvent se révéler utiles pour d’autres programmes, et renforcer la transparence et la responsabilisation, tout en instaurant la confiance au sein des partenaires (financiers).
• Il existe de très nombreuses méthodes d’évaluation, de l’enquête appréciative à l’étude du retour social sur investissement. Vous trouverez une liste complète et la description de ces méthodes sur BetterEvaluation.org.

Enseignements tirés

Une évaluation (externe) comporte généralement plusieurs questions d’évaluation. Comme décrit sur le site BetterEvaluation.org, ces questions couvrent généralement trois grands domaines d’un projet :

• La pertinence
• L’efficacité
• L’efficience

Si l’évaluation est destinée à identifier ce qui fonctionne et ce qui ne fonctionne pas, et pourquoi, alors des enseignements pourront en être tirés : « Que devrionsnous faire autrement la prochaine fois ? Et qu’allons-nous garder ? »

Conseils pour formuler les enseignements tirés :

• Les enseignements doivent prendre la forme d’un principe général susceptible d’être appliqué à d’autres situations, ou qui peut les concerner.
• Ne présentez pas ces enseignements sous forme d’observations, de descriptions ou de recommandations sans apporter de justification. Il faut justifier les enseignements à l’aide de données qui prouvent leur validité.
• Il faut expliquer les enseignements dans le contexte du projet. Pour que les enseignements soient utiles à leurs destinataires, ces derniers doivent comprendre le contexte qui a permis leur obtention, et ainsi décider s’ils leur sont adaptés et éventuellement bénéfiques.

Si vous cherchez un format pour présenter les enseignements tirés, vous pouvez tenir compte de ce modèle : Si vous faites X et que les conditions Z sont présentes, alors vous obtiendrez Y. Ce modèle est décrit plus en détail et accompagné d’exemples dans ce guide. Vous pouvez tirer des enseignements des activités mises en place à tout moment de l’exécution du projet. L’approche After Action Review peut être appliquée à cet effet. Les enseignements tirés peuvent être traduits en recommandations pour un nouveau projet ou pour la phase suivante du projet.

Par où commencer ?

Comme vous avez pu le constater, BetterEvaluation.org est une précieuse source d’informations, de documents et d’exemples sur les évaluations. Si vous n’avez pas de grandes connaissances en la matière, vous pouvez commencer par consulter le Manager’s guide, également disponible en français. Il est très utile pour les personnes chargées de la gestion d’une évaluation ou de choisir un intervenant pour la réaliser, et comprend des exemples de mandats.

Conclusion

Il est essentiel d’établir clairement les objectifs de votre évaluation. Va-t-elle être bénéfique pour vos travaux et/ou va-t-elle respecter les exigences des bailleurs ? Pour rendre plus efficaces les futurs travaux, il est indispensable de tirer les leçons d’une évaluation.

Lectures suggérées

Si vous êtes novices dans le domaine, vous pouvez consulter la page Evaluation resources for newbies.

Remerciements

Auteurs: Marten Schoonman (Akvo.org)
Contributeurs: Anita van der Laan (Akvo.org), Annabelle Poelert (Akvo.org), Arun Kumar Pratihast (Akvo.org), Harro Riedstra (Akvo.org), Natacha Amorsi (Office International de L'Eau, OIEau)

AfriAlliance

L’Alliance de l’innovation sur l’eau et le climat entre l’Afrique et l’Europe (AfriAlliance) est un projet d’une durée de 5 ans, financé par le Programme européen pour la recherche et l’innovation H2020. Le projet vise à mieux préparer l’Afrique pour faire face aux défis futurs liés au changement climatique en stimulant le partage des connaissances et la collaboration entre les parties prenantes africaines et européennes. Dans ce projet, plutôt que de créer de nouveaux réseaux, les 16 partenaires d’Afrique et de l’Union Européenne consolideront les réseaux existants. Ces réseaux, constitués de chercheurs, de décideurs, de professionnels de terrain, de citoyens et d’autres intervenants clés, seront consolidés pour développer un mécanisme de partage des connaissances efficace et dédié à la résolution des problèmes. Ce processus sera coordonné par une plateforme d’innovation : l’Alliance Afrique-UE d’innovation pour l’Eau et le Climat.

AfriAlliance est dirigée par l’IHE Delft Institute for Water Education (Directeur de projet : Dr. Uta Wehn) et sa mise en oeuvre court de 2016 à 2021. Le projet a reçu un financement du programme de recherche et d’innovation Horizon 2020 de l’Union Européenne dans le cadre de l’accord de subvention n ° 689162.