İzleme ve değerlendirme: farkları ve bir proje örneği

İnsanlar genellikle "M&E" ifadesini, sanki izleme ve değerlendirme aynı işmiş gibi tek bir kelimeymiş gibi kullanırlar. Ancak aynı değillerdir. Her ikisi de veri kullanır ve her ikisi de bir projenin daha iyi işlemesine yardımcı olur; ancak farklı zamanlarda, farklı okuyucular için farklı sorular sorarlar. Bunları birbirine karıştırmak, bir projenin çok fazla veri toplayıp yine de işe yarayıp yaramadığını söyleyememesinin en yaygın nedenlerinden biridir.

Tek cümlede izleme

İzleme, bir proje yürütülürken yapılan rutin takiptir. Sık sık ve bir programa bağlı kalarak az miktarda veri toplar ve bunu planla karşılaştırırsınız: Faaliyetler gerçekleşiyor mu? Ulaşmak istediğimiz kişilere ulaşıyor muyuz? Beklendiği gibi harcama yapıyor muyuz? Bu ay düzeltebileceğimiz bir terslik var mı?

İzleme, çoğunlukla projeyi yürüten ekip içindir. Değeri hızından gelir: üçüncü haftada fark edilen bir sorun dördüncü haftada düzeltilebilir.

Tek cümlede değerlendirme

Değerlendirme, projenin neyi başardığına ve neden başardığına dair daha derin, daha az sıklıkla yapılan bir yargıdır. Haftalık rakamlardan uzaklaşır ve daha büyük sorular sorar: Bu, yapılması gereken doğru şey miydi? İşe yaradı mı? Kimin için? Neyi değiştirirdik? Değişim kalıcı oldu mu?

Birçok değerlendirme, OECD'nin değerlendirme rehberinde yaygın olarak ilişkilendirilen kriterleri kullanır: uygunluk, tutarlılık, etkililik, verimlilik, etki ve sürdürülebilirlik. Bunların hepsine her zaman ihtiyacınız yoktur, ancak ciddi bir değerlendirmenin nelere baktığı konusunda kullanışlı bir kontrol listesidirler.

Değerlendirme genellikle orta noktada, sonunda veya bir süre sonra yapılır ve yargının bağımsız olması için genellikle proje ekibinin dışından biri tarafından gerçekleştirilir veya denetlenir. Okuyucuları daha geniştir: yöneticiler, ortaklar, bağışçılar ve ilgili topluluklar.

Yan yana karşılaştırma

İkisi birbirini besler. İyi bir izleme verisi, iyi bir değerlendirmenin ham maddesidir. İyi bir değerlendirme ise en başta hangi göstergelerin izlenmeye değer olduğunu size söyler.

Küçük bir örnek

Bir bölgedeki kadınlara yönelik bir okuryazarlık programı hayal edin. Planın üç parçası vardır: öğrencileri kaydetmek, dersleri yürütmek ve okuma becerisini ölçmek.

İzleme şu şekilde görünür: Ekip her ay kaç kadının kayıt yaptırdığını, her derse kaç kişinin katıldığını, hangi derslerin neden iptal edildiğini kaydeder. Rakamlar, iki köyde katılımın keskin bir şekilde düştüğünü gösterir. Ekip ziyaret eder, ders saatinin su toplama saatiyle çakıştığını öğrenir ve oturumları öğleden sonraya alır. Katılım tekrar artar. Bu, izlemenin işini yapmasıdır: sorun erkenden fark edilmiş ve proje sırasında düzeltilmiştir.

Değerlendirme şu şekilde görünür: Programın sonunda, yürütülmesinde yer almayan biri, başlangıç ve bitişteki okuma becerilerini karşılaştırır, öğrenciler ve aileleriyle konuşur ve programın en başta doğru tasarım olup olmadığını sorgular. Bulgular; okumanın geliştiğini, öğleden sonra programının yardımcı olduğunu, evden çıkamayan kadınların yine de gözden kaçırıldığını ve bir sonraki programın ev ziyaretlerini içermesi gerektiğini söyleyebilir. İşte değerlendirme budur: sonuçlar hakkında bir yargı ve bir sonraki adımda ne yapılacağına dair bir bakış açısı.

Bu örnekteki rakamlar gerçek veriler değil, açıklayıcıdır.

Hesap Verebilirlik ve Öğrenme nerede devreye girer?

MEAL, M&E'ye iki kelime daha ekler: Hesap Verebilirlik ve Öğrenme.

• Hesap Verebilirlik, hizmet ettiğiniz insanlara ve sizi finanse edenlere karşı sorumlu olmak demektir. İzleme verileri ile şikayet veya geri bildirim kayıtları gösterdiklerinizdir; değerlendirme ise sonuçları nasıl açıkladığınızdır.
• Öğrenme, bulguların yaptıklarınızı değiştirmesi anlamına gelir. Yazılıp dosyaya kaldırılan bir rapor öğrenme değildir. Verilerin gösterdikleri nedeniyle bir sonraki planda yapılan bir değişiklik öğrenmedir.

Bu açıdan bakıldığında, izleme, değerlendirme, hesap verebilirlik ve öğrenme bir döngüdür: topla, kontrol et, açıkla, uyarla. MEAL nedir rehberimizde daha fazlasını okuyabilirsiniz.

Yaygın hatalar

• İzlemeyi değerlendirme olarak görmek. Faaliyetleri ve katılımcıları saymak size ne yapıldığını söyler, bir fark yaratıp yaratmadığını değil.
• Sorunları bulmak için değerlendirmeyi beklemek. Bir köy ikinci ayda katılımı bıraktıysa, bunu ikinci ayda bilmek istersiniz.
• Çok fazla gösterge. Kimsenin okumadığı uzun bir liste, ekibin her ay baktığı beş göstergeden daha kötüdür.
• Başlangıç değeri (baseline) olmaması. Bir başlangıç değeri olmadan daha sonraki değişimi gösteremezsiniz.
• Karara dönüşmeyen veriler. Her sayı için şunu sorun: buna kim bakacak ve farklı olarak ne yapacak?

Her ikisini de tek bir yerde yapmak

Pulseform'da her göstergenin bir başlangıç değeri, hedefi ve yönü vardır; durumu ise en son değerinizi hedefle karşılaştırır ki bu izleme kısmıdır. Aynı kayıtlar, faaliyetler, riskler ve şikayetlerle birlikte bir bağışçı raporunda tek bir anda yakalanabilir, bu da bir değerlendirmeciye net bir başlangıç noktası sağlar. Rehberdeki göstergeler ve izleme planları ile izleme paneli bölümlerine göz atın.