Évaluer pour l'avenir : comment le suivi évaluatif peut transformer les paysages d'évaluation complexes 

Face à l'évolution du paysage financier mondial et à la complexité croissante des défis climatiques et environnementaux, les approches traditionnelles de suivi et d'évaluation sont soumises à une pression croissante pour fournir des informations plus rapides et des enseignements plus concrets. Deux de nos spécialistes en évaluation chez Ecorys UK sont à l'avant-garde de cette évolution et partagent leur expérience et leurs enseignements : 

En nous appuyant sur nos travaux d'évaluation d'un portefeuille complexe de projets climat et nature financé par l'APD britannique, nous avons pu tester des approches qui revêtent une importance croissante pour l'avenir de l'évaluation. L'une d'elles est la suivante : le rôle du suivi évaluatif dans les évaluations de portefeuille complexes. 

Dans ce blog, nous partageons les principaux enseignements de notre expérience et explorons comment le suivi évaluatif peut fournir des informations cruciales et améliorer la prise de décision dans des environnements opérationnels complexes. Nous avons récemment présenté notre approche lors du Festival des méthodes d'été d'Ecorys, qui a offert un espace précieux d'échange d'expériences et de perspectives avec des collègues du secteur, ce qui a enrichi nos réflexions. 

Pourquoi le suivi évaluatif est important 

D’après notre expérience, le suivi et l’évaluation sont souvent traités comme des fonctions distinctes plutôt que comme faisant partie d’un système connecté : 

• Le Monitoring suit généralement les programmes/politiques par rapport à des indicateurs pour vérifier les résultats escomptés par rapport à ceux obtenus. 

• Évaluation, en revanche, évalue généralement l'efficacité et les résultats à un moment précis. Cette évaluation peut être menée au début (formative), à ​​la fin (sommative) ou pendant les initiatives (développementales), et peut inclure des évaluations de processus, d'impact et d'optimisation des ressources.  

Cette couche plus profonde d’enquête : 

• Permet des améliorations et des ajustements fondés sur des données probantes en temps réel 

• Permet une réflexion et une évaluation plus structurées et, dans le cas de portefeuilles importants, plus systématiques dans l'ensemble des programmes et des projets

Contrairement au suivi traditionnel, le suivi évaluatif ne se limite pas à mesurer les progrès par rapport à des indicateurs. Il approfondit et replace les données dans un contexte plus large de gouvernance, de prise de décision, d'incitations et de relations avec les parties prenantes. Cela nous permet de mieux comprendre comment et pourquoi le changement se produit (ou non).

Le suivi évaluatif n'est pas une approche totalement nouvelle, mais il est encore en pleine émergence et gagne en popularité en tant qu'outil précieux. Les expériences de programmes tels que BRACÉ ont démontré l'intérêt de cette approche. Au lieu de considérer le suivi comme un simple exercice de responsabilisation, le suivi évaluatif interroge les hypothèses de conception et explore les mécanismes sous-jacents aux résultats. Cela nécessite d'intégrer la réflexion évaluative aux processus de suivi afin de répondre aux est ce que nous faisons, why, ainsi how de changement.

Principaux facteurs à l’origine de ce changement 

Nous constatons une demande croissante de la part des donateurs et des partenaires de développement pour des analyses plus approfondies et des approches nuancées. Les facteurs à l'origine de cette évolution sont les suivants : 

• Les rapports sur les programmes et les projets sont limités et l’accès à des données de haute qualité est difficile. 

• Contraintes budgétaires et appétit réduit pour les évaluations conventionnelles. 

• Un accent plus fort sur l’apprentissage, l’adaptation et les recommandations tout au long de la mise en œuvre. 

• Des délais longs pour que les résultats environnementaux et climatiques se matérialisent 

• Limites des modèles d’évaluation traditionnels de base, à mi-parcours et finaux pour l’apprentissage au niveau du portefeuille. 

Le suivi évaluatif répond directement à ces défis en fournissant rétroaction en temps réel et boucles d'apprentissage continues—en veillant à ce que les informations soient intégrées tout au long du cycle de vie d’un programme plutôt que d’être capturées uniquement à la fin.

Application du suivi évaluatif dans la pratique 

Dans notre travail, le suivi évaluatif nous a permis d’ajouter profondeur et pratique La valeur Au-delà des livrables de surveillance standard. Voici quelques exemples de nos applications : 

1. Offrir plus récits détaillés sur les performances en termes de production et de résultats. 
2. Expliquer les raisons pour lesquelles variations et défis contextuels. 
3. Offrant des solutions exploitables, recommandations spécifiques pour les partenaires et les bailleurs de fonds. 
4. Expliquer où les résultats sont manquants ou indisponible. 
5. Tenue ateliers de validation avec les partenaires de mise en œuvre pour vérifier les résultats et partager les expériences. 

L'une des façons dont nous avons appliqué le suivi évaluatif consiste à collecter régulièrement des données sur la probabilité que les programmes et les projets conduisent à des changements transformateurs. Notre équipe a intégré un cadre des « signaux de changement » Examiner de manière critique les extrants et les résultats. Cela nous aide à identifier les facteurs sous-jacents qui déclenchent et accélèrent un changement systémique et durable. Par exemple, un moteur pourrait être le renforcement des capacités favorisant l'indépendance, l'appropriation et l'institutionnalisation au-delà du cycle de vie du projet. Nous recueillons également des données sur les mécanismes et les catalyseurs qui soutiennent ces moteurs, comme la création d'incitations par le partage de données probantes ou la facilitation de l'évolutivité et de la réplication des innovations. 

Défis et considérations 

Bien que le suivi évaluatif offre des avantages évidents, nous avons également rencontré certains défis :  

• La portée doit être clairement définie : Le suivi évaluatif n'est pas une évaluation formelle, et il est nécessaire de clarifier les livrables du projet. Le travail de suivi évaluatif est généralement guidé par le cadre de résultats, et non par le cadre d'évaluation. Cependant, les extrants peuvent servir à éclairer les évaluations futures, ainsi que les priorités d'apprentissage. 

• La disponibilité des ressources: Le suivi évaluatif nécessite beaucoup de ressources et nécessite donc une budgétisation et une planification minutieuses.  

• Variabilité des données : Dans le cas de portefeuilles complexes, la qualité et la disponibilité des données et de la collaboration peuvent différer, nécessitant des approches adaptables. 

Malgré ces défis, le suivi évaluatif offre une valeur ajoutée significative aux portefeuilles de grande envergure, permettant de combler l'écart entre les calendriers traditionnels de suivi et d'évaluation. Il favorise l'apprentissage continu, la compréhension contextuelle et l'adaptation dans des environnements opérationnels complexes. 

Regard vers l'avenir : l'avenir de MEL 

Le paysage du MEL est de plus en plus façonné par l’évolution des réalités de financement et des priorités gouvernementales.  

Resserrement des budgets et changement des priorités : 

Les budgets mondiaux de l’APD diminuent – ​​l’aide du Royaume-Uni, par exemple, devrait passer de 0.5 % à 0.3 % du revenu national brut (RNB) en 2027. D’autres donateurs comme les États-Unis, la France et l’Allemagne ont également procédé à des réductions importantes en 2024. Les bailleurs de fonds deviennent plus sélectifs – privilégiant les dépenses stratégiques et à impact et recherchant un apprentissage maximal pour des ressources limitées.   

Le budget d'aide du Royaume-Uni pour 2025 et 2026 sera axé sur les crises humanitaires, sanitaires et climatiques, les dépenses étant prioritairement allouées aux organisations multilatérales les plus performantes. Cela signifie que les modèles complexes d'évaluation de portefeuille sont susceptibles de devenir de plus en plus courants. 

Face au resserrement des financements, des approches MEL flexibles et adaptatives deviennent essentielles. La stratégie d'évaluation 2025 du FCDO témoigne d'un intérêt croissant pour les méthodes innovantes d'évaluation de la diplomatie.  

Intégration de l’apprentissage et des preuves : 

Dans un contexte de baisse des budgets, il est plus important que jamais de démontrer un impact continu et d'intégrer les apprentissages et les données probantes dans la prise de décision tout au long du cycle de vie des portefeuilles et des programmes. Le suivi évaluatif est un moyen de fournir ces informations en temps réel et ces apprentissages exploitables à nos clients. En décloisonnant le suivi, l'évaluation et l'apprentissage, le suivi évaluatif permet de concevoir et de mettre en œuvre des cadres de SEA de manière plus intégrée et stratégique. 

Innovation stratégique: 

À l’avenir, l’avenir de MEL nécessitera à la fois adaptation et l’innovationFace à l'évolution des réalités financières et des besoins des clients, nous devons adopter une approche stratégique, flexible et intentionnelle dans la conception et la mise en œuvre de nos activités de MEL. Le suivi évaluatif offre un état d'esprit agile qui favorise cette démarche.