Evaluar para el futuro: cómo el monitoreo evaluativo puede transformar panoramas de evaluación complejos 

A medida que el panorama de la financiación global cambia y los desafíos climáticos y ambientales se vuelven más complejos, los enfoques tradicionales de monitoreo y evaluación se ven sometidos a una creciente presión para generar información más rápida y un aprendizaje más práctico. Dos de nuestros especialistas en evaluación de Ecorys UK están a la vanguardia de esta evolución y comparten su experiencia y aprendizajes: 

A partir de nuestro trabajo de evaluación de una compleja cartera de proyectos de clima y naturaleza financiada por la AOD del Reino Unido, hemos tenido la oportunidad de probar enfoques que cobran cada vez mayor importancia para el futuro de la evaluación. Uno de ellos es El papel del seguimiento evaluativo en evaluaciones de carteras complejas. 

En este blog, compartimos lecciones clave de nuestra experiencia y exploramos cómo el monitoreo evaluativo puede brindar información crucial y mejorar la toma de decisiones en entornos operativos complejos. Recientemente, compartimos nuestro enfoque en el Festival de Métodos de Verano de Ecorys, que brindó un valioso espacio para intercambiar experiencias y perspectivas con colegas del sector, lo que ha fortalecido nuestras reflexiones. 

Por qué es importante el seguimiento evaluativo 

En nuestra experiencia, el seguimiento y la evaluación a menudo se tratan como funciones separadas en lugar de como parte de un sistema conectado: 

• Monitoring Generalmente, se hace un seguimiento de los programas/políticas en función de indicadores para comparar los resultados esperados con los logrados. 

• EvaluaciónEn cambio, suele evaluar la eficacia y los resultados en un momento determinado. Esto puede realizarse al inicio (formativo), al final (sumativo) o durante las iniciativas (de desarrollo), y puede incluir evaluaciones de proceso, impacto y rentabilidad.  

Esta capa más profunda de investigación: 

• Permite mejoras y ajustes basados ​​en evidencia en tiempo real 

• Permite que la reflexión y la evaluación sean más estructuradas y, en el caso de carteras grandes, más sistemáticas en todos los programas y proyectos.

A diferencia del monitoreo tradicional, el monitoreo evaluativo no se limita a medir el progreso con indicadores. Profundiza y ubica los datos en un contexto más amplio: gobernanza, toma de decisiones, incentivos y relaciones con las partes interesadas. Esto nos permite comprender mejor cómo y por qué se está produciendo (o no) el cambio.

El seguimiento evaluativo no es un enfoque completamente nuevo, pero aún está emergiendo y ganando terreno como una herramienta valiosa. Experiencias de programas como APOYO han demostrado el valor de este enfoque. En lugar de tratar el monitoreo como un mero ejercicio de rendición de cuentas, el monitoreo evaluativo cuestiona los supuestos de diseño y explora los mecanismos subyacentes a los resultados. Esto requiere integrar el pensamiento evaluativo en los procesos de monitoreo para responder a las preguntas Lo que , por qué y cómo de cambio.

Factores clave detrás del cambio 

Observamos una creciente demanda por parte de donantes y socios para el desarrollo de perspectivas más profundas y enfoques más matizados. Los factores que impulsan este cambio incluyen: 

• Detalle limitado en los informes de programas y proyectos y desafíos para acceder a datos de alta calidad. 

• Restricciones presupuestarias y menor apetito por las evaluaciones convencionales. 

• Un mayor énfasis en el aprendizaje, la adaptación y las recomendaciones a lo largo de la implementación. 

• Plazos largos para que se materialicen los resultados ambientales y climáticos 

• Limitaciones de los diseños tradicionales de evaluación inicial, intermedia y final para el aprendizaje a nivel de portafolio. 

El seguimiento evaluativo aborda directamente estos desafíos al proporcionar retroalimentación en tiempo real y bucles de aprendizaje continuo—garantizar que los conocimientos se integren a lo largo de todo el ciclo de vida del programa en lugar de capturarse únicamente al final.

Aplicación del seguimiento evaluativo en la práctica 

En nuestro trabajo, el seguimiento evaluativo nos ha permitido añadir profundidad y Información valor Más allá de los resultados estándar de monitoreo. Algunas de las maneras en que lo hemos aplicado incluyen: 

1. Proporcionar más narraciones detalladas sobre el desempeño de los productos y los resultados. 
2. Esbozando las razones para variaciones y desafíos contextuales. 
3. Ofreciendo soluciones prácticas, recomendaciones específicas Para socios y financiadores. 
4. Explicando dónde faltan resultados o no disponible. 
5. Tenencia talleres de validación con socios implementadores para verificar los hallazgos y compartir experiencias. 

Una de las formas en que hemos aplicado el monitoreo evaluativo es recopilar datos rutinariamente sobre la probabilidad de que los programas y proyectos generen un cambio transformador. Nuestro equipo integró un Marco de 'señales de cambio' Examinar críticamente los productos y resultados. Esto nos ayuda a identificar los factores subyacentes que desencadenan y aceleran un cambio sistémico y sostenible. Por ejemplo, un factor impulsor podría ser el desarrollo de capacidades que fomenten la independencia, la apropiación y la institucionalización más allá del ciclo de vida del proyecto. También recopilamos datos sobre los mecanismos y facilitadores que apoyan estos factores impulsores, como la creación de incentivos mediante el intercambio de evidencia o la facilitación de la escalabilidad y la replicación de innovaciones. 

Desafíos y consideraciones 

Si bien el seguimiento evaluativo ofrece claros beneficios, también hemos experimentado algunos desafíos:  

• El alcance debe estar claramente definido: El seguimiento evaluativo no es una evaluación formal, y se requiere claridad sobre los resultados del proyecto. El trabajo de seguimiento evaluativo suele guiarse por el marco de resultados, y no por el marco de evaluación. Sin embargo, los resultados pueden utilizarse para fundamentar futuras evaluaciones, así como las prioridades de aprendizaje. 

• Disponibilidad de recursos: El seguimiento evaluativo requiere muchos recursos, por lo que es necesario planificar y presupuestar cuidadosamente.  

• Variabilidad de los datos: En el caso de carteras complejas, la calidad y la disponibilidad de los datos y la colaboración pueden diferir, lo que requiere enfoques adaptables. 

A pesar de estos desafíos, el monitoreo evaluativo aporta un valor significativo a las grandes carteras, ayudando a acortar la brecha entre los plazos tradicionales de monitoreo y evaluación. Favorece el aprendizaje continuo, la comprensión del contexto y la adaptación en entornos operativos complejos. 

Mirando hacia el futuro: el futuro de MEL 

El panorama del MEL está cada vez más condicionado por las cambiantes realidades de financiación y las prioridades gubernamentales.  

Ajuste presupuestario y cambio de prioridades: 

Los presupuestos globales de AOD se están reduciendo: la ayuda del Reino Unido, por ejemplo, se reducirá del 0.5% al ​​0.3% del Ingreso Nacional Bruto (INB) en 2027, y otros donantes como Estados Unidos, Francia y Alemania también realizaron recortes significativos en 2024. Los financiadores se están volviendo más selectivos, priorizando el gasto estratégico de impacto y buscando el máximo aprendizaje para recursos limitados.   

El presupuesto de ayuda del Reino Unido para 2025 y 2026 se centrará en las crisis humanitarias, sanitarias y climáticas, priorizando el gasto a través de las organizaciones multilaterales de mayor impacto. Esto significa que es probable que los modelos complejos de evaluación de carteras se vuelvan cada vez más comunes. 

Ante la restricción de la financiación, los enfoques de evaluación de la diplomacia (MEL) flexibles y adaptables se vuelven cruciales. La Estrategia de Evaluación 2025 de la FCDO señala un creciente interés en métodos innovadores para evaluar la diplomacia.  

Incorporando aprendizaje y evidencia: 

En un contexto de presupuestos cada vez más reducidos, demostrar un impacto continuo e integrar el aprendizaje y la evidencia en la toma de decisiones a lo largo de la vida de las carteras y programas es más importante que nunca. El monitoreo evaluativo es una forma de proporcionar información en tiempo real y aprendizaje práctico a nuestros clientes. Al derribar los silos entre monitoreo, evaluación y aprendizaje, el monitoreo evaluativo permite diseñar e implementar marcos de MEL de forma más integrada y estratégica. 

Innovación estratégica: 

De cara al futuro, el futuro de MEL requerirá tanto adaptaciónes y la innovación, el diseño sostenible A medida que cambian las realidades de financiación y evolucionan las necesidades de los clientes, debemos ser estratégicos, flexibles y con propósito en el diseño y la ejecución del trabajo de MEL. El monitoreo evaluativo ofrece una mentalidad ágil que lo respalda.