Gelecek İçin Değerlendirme: Değerlendirme İzleme, Karmaşık Değerlendirme Ortamlarını Nasıl Dönüştürebilir? 

Küresel finansman ortamı değiştikçe ve iklim ve çevre sorunları daha karmaşık hale geldikçe, geleneksel izleme ve değerlendirme yaklaşımları daha hızlı içgörüler ve daha uygulanabilir bilgiler sunma konusunda giderek artan bir baskı altına giriyor. Ecorys UK değerlendirme uzmanlarımızdan ikisi bu evrimin ön saflarında yer alıyor ve deneyimlerini ve öğrendiklerini paylaşıyor: 

Birleşik Krallık ODA tarafından finanse edilen karmaşık bir iklim ve doğa portföyünü değerlendiren çalışmamızdan yararlanarak, değerlendirmenin geleceği için giderek daha önemli hale gelen yaklaşımları test etme fırsatı bulduk. Bunlardan biri de Karmaşık portföy değerlendirmelerinde değerlendirme izlemenin rolü. 

Bu blog yazısında, deneyimlerimizden edindiğimiz önemli dersleri paylaşıyor ve değerlendirici izlemenin karmaşık işletme ortamlarında kritik içgörüler sağlayıp karar alma süreçlerini nasıl iyileştirebileceğini inceliyoruz. Yaklaşımımızı yakın zamanda Ecorys Yaz Yöntemleri Festivali'nde paylaştık. Bu festival, sektördeki meslektaşlarımızla deneyim ve içgörü paylaşımı için değerli bir ortam sağladı ve bu da düşüncelerimizi daha da güçlendirdi. 

Değerlendirmeli izleme neden önemlidir? 

Deneyimlerimize göre, izleme ve değerlendirme genellikle birbirine bağlı bir sistemin parçası olmaktan ziyade ayrı işlevler olarak ele alınmaktadır: 

• İzleme Genellikle beklenen sonuçların elde edilen sonuçlarla doğrulanması için programları/politikaları göstergelere göre izler. 

• Değerlendirme , aksine, genellikle belirli bir zaman noktasında etkinliği ve sonuçları değerlendirir. Bu, girişimlerin başında (oluşturucu), sonunda (toplamsal) veya sırasında (gelişimsel) gerçekleştirilebilir ve süreç, etki ve maliyet-fayda değerlendirmelerini içerebilir.  

Soruşturmanın bu daha derin katmanı: 

• Gerçek zamanlı olarak kanıta dayalı iyileştirmeleri ve ayarlamaları mümkün kılar 

• Yansıma ve değerlendirmenin daha yapılandırılmış olmasını ve büyük portföyler söz konusu olduğunda programlar ve projeler arasında daha sistematik olmasını sağlar

Geleneksel izlemenin aksine, değerlendirici izleme, göstergelere göre ilerlemeyi ölçmekle sınırlı kalmaz. Daha derinlemesine inceler ve verileri yönetişim, karar alma, teşvikler ve paydaş ilişkileri gibi daha geniş bağlamına yerleştirir. Bu, değişimin nasıl ve neden gerçekleştiğini (veya gerçekleşmediğini) daha iyi anlamamızı sağlar.

Değerlendirmeli izleme tamamen yeni bir yaklaşım olmasa da, değerli bir araç olarak hala ortaya çıkıyor ve ilgi görüyor. HAZIRLANMIŞ Bu yaklaşımın değerini göstermişlerdir. İzlemeyi yalnızca bir hesap verebilirlik çalışması olarak ele almak yerine, değerlendirici izleme, tasarım varsayımlarını sorgular ve sonuçların altında yatan mekanizmaları araştırır. Bu, şu sorulara cevap bulmak için değerlendirici düşüncenin izleme süreçlerine entegre edilmesini gerektirir: ne, neden, ve Nasıl değişimin.

Değişimin arkasındaki temel itici güçler 

Bağışçılardan ve kalkınma ortaklarından daha derin içgörülere ve ayrıntılı yaklaşımlara yönelik artan bir talep görüyoruz. Bu değişimi yönlendiren faktörler şunlardır: 

• Program ve proje raporlamasında sınırlı ayrıntı ve yüksek kaliteli verilere erişimde zorluklar. 

• Bütçe kısıtlamaları ve konvansiyonel değerlendirmelere olan ilginin azalması. 

• Uygulama boyunca öğrenme, adaptasyon ve önerilere daha fazla vurgu yapılması. 

• Çevresel ve iklimsel sonuçların gerçekleşmesi için uzun zaman dilimleri 

• Portföy düzeyinde öğrenme için geleneksel başlangıç, orta ve son değerlendirme tasarımlarının sınırlamaları. 

Değerlendirmeli izleme, bu zorlukları doğrudan ele alarak şunları sağlar: gerçek zamanlı geribildirim ve sürekli öğrenme döngüleri—içgörülerin yalnızca programın sonunda yakalanması yerine programın yaşam döngüsü boyunca yer almasını sağlamak.

Değerlendirmeli izlemeyi pratikte uygulamak 

Çalışmamızda, değerlendirici izleme bize şunu ekleme olanağı sağladı: derinlik ve pratik değer Standart izleme çıktılarının ötesinde. Bunu uyguladığımız yöntemlerden bazıları şunlardır: 

1. Daha fazlasını sağlamak detaylı anlatılar çıktı ve çıktı performansına ilişkin. 
2. Nedenlerini ana hatlarıyla açıklayarak varyasyonlar ve bağlamsal zorluklar. 
3. Eyleme dönüştürülebilir teklifler sunmak, özel öneriler Ortaklar ve fon sağlayıcılar için. 
4. Nerede olduğunu açıklamak sonuçlar eksik veya kullanılamıyor. 
5. Tutma doğrulama atölyeleri Bulguları doğrulamak ve deneyimleri paylaşmak için uygulama ortaklarıyla birlikte çalışılır. 

Değerlendirme amaçlı izlemeyi uygulama yöntemlerimizden biri, programların ve projelerin dönüşümsel değişime yol açma olasılığı hakkında düzenli olarak veri toplamaktır. Ekibimiz, 'değişim sinyalleri' çerçevesi Çıktıları ve sonuçları eleştirel bir şekilde incelemek. Bu, sistemik ve sürdürülebilir değişimi tetikleyen ve hızlandıran temel faktörleri belirlememize yardımcı olur. Örneğin, bir itici güç, proje yaşam döngüsünün ötesinde bağımsızlığı, sahiplenmeyi ve kurumsallaşmayı teşvik eden yollarla kapasite oluşturmak olabilir. Ayrıca, kanıt paylaşımı yoluyla teşvikler oluşturmak veya yeniliklerin ölçeklenebilirliğini ve tekrarlanabilirliğini sağlamak gibi bu itici güçleri destekleyen mekanizmalar ve kolaylaştırıcılar hakkında da veri topluyoruz. 

Zorluklar ve düşünceler 

Değerlendirmeli izlemenin açık faydaları olmasına rağmen bazı zorluklarla da karşılaştık:  

• Kapsam açıkça tanımlanmalıdır: Değerlendirmeye dayalı izleme, resmi bir değerlendirme değildir ve proje çıktıları konusunda netliğe ihtiyaç vardır. Değerlendirmeye dayalı izleme çalışmaları genellikle değerlendirme çerçevesi tarafından değil, sonuç çerçevesi tarafından yönlendirilir. Ancak çıktılar, gelecekteki değerlendirmelerin yanı sıra öğrenme önceliklerini de bilgilendirmek için kullanılabilir. 

• Kaynak kullanılabilirliği: Değerlendirmeli izleme kaynak yoğun bir süreçtir, bu nedenle dikkatli bütçeleme ve planlama gerektirir.  

• Veri değişkenliği: Karmaşık portföylerde, verilerin ve iş birliğinin kalitesi ve erişilebilirliği farklılık gösterebilir ve bu da uyarlanabilir yaklaşımlar gerektirir. 

Bu zorluklara rağmen, değerlendirici izleme, büyük portföyler için önemli bir değer sağlayarak geleneksel izleme ve değerlendirme zaman çizelgeleri arasındaki boşluğu kapatmaya yardımcı olur. Karmaşık işletme ortamlarında sürekli öğrenmeyi, bağlamsal anlayışı ve uyumu destekler. 

Geleceğe bakış: MEL'in geleceği 

MEL manzarası giderek değişen finansman gerçekleri ve hükümet öncelikleri tarafından şekillendiriliyor.  

Bütçelerin kısılması ve önceliklerin değiştirilmesi: 

Küresel ODA bütçeleri daralıyor; örneğin, İngiltere'nin yardımının 2027'de Gayri Safi Milli Gelir'in (GSMH) %0.5'inden %0.3'üne düşmesi bekleniyor. ABD, Fransa ve Almanya gibi diğer bağışçılar da 2024'te önemli kesintiler yaptı. Fon sağlayıcılar daha seçici hale geliyor; etkili, stratejik harcamalara öncelik veriyor ve sınırlı kaynaklardan maksimum fayda sağlamayı hedefliyor.   

Birleşik Krallık'ın 2025 ve 2026 yardım bütçesi, insani yardım, sağlık ve iklim krizlerine odaklanacak ve harcamalar en etkili çok taraflı kuruluşlar aracılığıyla önceliklendirilecektir. Bu, karmaşık portföy değerlendirme modellerinin giderek daha yaygın hale gelmesi muhtemeldir. 

Finansman sıkılaştıkça, esnek ve uyarlanabilir MEL yaklaşımları kritik hale geliyor. Dışişleri ve Güvenlik Bakanlığı'nın 2025 Değerlendirme Stratejisi, diplomasiyi değerlendirmek için yenilikçi yöntemlere olan ilginin arttığına işaret ediyor.  

Öğrenme ve kanıtın yerleştirilmesi: 

Azalan bütçeler arasında, portföy ve programların ömrü boyunca devam eden etkiyi göstermek ve öğrenme ve kanıtları karar alma süreçlerine entegre etmek her zamankinden daha önemli. Değerlendirici izleme, müşterilerimize bu gerçek zamanlı içgörüleri ve eyleme geçirilebilir öğrenmeyi sağlamanın bir yoludur. İzleme, değerlendirme ve öğrenme arasındaki sınırları ortadan kaldırarak, değerlendirici izleme, MEL çerçevelerinin daha entegre ve stratejik bir şekilde tasarlanıp sunulmasını sağlar. 

Stratejik yenilik: 

İleriye baktığımızda, MEL'in geleceği her ikisini de gerektirecek adaptasyon ve yenilikFinansman gerçekleri değiştikçe ve müşteri ihtiyaçları evrildikçe, MEL çalışmalarını nasıl tasarlayıp sunduğumuz konusunda stratejik, esnek ve bilinçli olmamız gerekiyor. Değerlendirmeli izleme, bunu destekleyen çevik bir bakış açısı sunar.