Bir programın bileşenlerinin eksiksiz ve yeterli bir açıklaması, onun uygulamasını değerlendirmek için esastır.

Bileşenler:

– stratejiler,

– etkinlikler,

– davranışlar,

– iletişim yolları ve

– Programın uygulanması için teknolojiler ve yararlanıcıların özellikleri ve uygulamanın nerede gerçekleştiği.

Programın bileşenlerinin uygun ve doğru bir şekilde tanımlanması, programın hangi yönlerinin planlandığı gibi uygulandığını ve uygulama farklılıklarında hangi olası faktörlerin etkili olduğunu değerlendirecektir.

Programın kapsamı (hedeflenen yararlanıcılar) olarak endişeleri değerlendirmek için bileşenlerin doğru şekilde belirtilmesi gözlemlendi. Ayrıca, uygulamanın sonuçları ile programın kendisinin sonuçları (üretim, ara sonuçlar, etkiler vb. açısından) arasındaki olası bağlantılar hakkında varsayımlar…

Aynı zamanda, program içeriğinin spesifikasyonu (veya detayı), değerlendirme süreci için bir gerekliliktir.

Değerlendirme sürecini planlamak ve yürütmek için kendi inisiyatifi, programın en uygun ve gerçekçi içeriğinin belirlenmesine katkıda bulunur. Bu, programın daha etkili olması (çünkü programın iç tutarlılığı bir ön taramadan geçmiştir) ve ikinci olarak, programın performansı diğer programlarla karşılaştırılacağı için sonuçların ve etkinin değerlendirilmesinin daha etkili olması için önemli bir koşuldur. hedefler ve daha tutarlı ve gerçekçi beklentiler.

Sürecin bir kamu programının tasarımını ve spesifikasyonunu iyileştirebileceğinin değerlendirilmesine izin vermek için bazı teknikler kullanılabilir.

1 – Biçimlendirici Değerlendirme: belirli bir müdahalenin yürütülmesine ilişkin pilot projelerden ve yararlanıcılardan toplanan verilere ve belirli faaliyetlerin ve araçların fizibilitesine ve bunların tasarım planına ve sağlanan yararlanıcılara ne ölçüde uygun olduklarına ilişkin bilgi verilmesine dayanır;

2 – Bir kamu programının arkasındaki teorinin uygun şekilde geliştirilmesi için “değerlendirilebilirlik” sistematik prosedürlerinin doğrulanması, tam ölçekli bir değerlendirmeye başlamadan önce, değerlendirme sürecinde verilerin planlanan kullanımlarını detaylandırın ve netleştirin.

En önemli adımları şunları içerir (Scheirer, 1994:49-50):

a) Programdan ve değerlendirmenin kendisinden beklentilerini netleştirmek için bir dizi toplantı yoluyla kilit politika yapıcıları, yöneticileri ve personeli dahil edin;

b) Programın üç yönü arasındaki beklenen nedensel ilişkileri detaylandıran, matris mantık diyagramı adı verilen bir modelin kullanılması: programa tahsis edilen kaynaklar, programda planlanan belirli faaliyetlerin uygulanması ve beklenen sonuçlar;

c) Alandaki operasyonların gerçekliğini ve önerilen teorinin ne ölçüde makul olduğunu incelemek için proje sahalarına yapılan ziyaretleri ve mevcut bilgileri kullanarak interaktif bir süreçle programın arkasındaki teorinin iyileştirilmesi;

d) Programdaki değişiklikler de dahil olmak üzere, politika yapıcılar ve program yöneticileri ile yapılan görüşmeler yoluyla değerlendirmeden elde edilen bilgiler için planlanan kullanımları netleştirmek;

e) Programın belirlenmesinde yardımcı olması için teorinin kullanılması. Programın geldiği temel konu ile ilgili teorilerin uygulanması ve altta yatan süreçleri aydınlatmak için verilerin kullanılması.

Bu tür bir değerlendirme süreci, yalnızca programın içeriğini belirlemek için değil, aynı zamanda sonraki etki değerlendirmelerinde kullanılacak gelir ölçüleri (göstergeler) ile program faaliyetleri arasında bağlantı kurmak için de önemlidir.

Buradaki teori terimi, bir kişinin, grubun veya organizasyonun davranışını açıklayan ve üstlenen birbiriyle ilişkili ilkeleri ifade eder.

Chen (1990) iki tür teoriyi ayırt eder:

– bir programın ne olması gerektiğini tanımlayan normatif ve

– önerilen çözümler (bağlamsal faktörler dahil) ve sonuç arasındaki nedensel ilişkileri deneysel olarak tanımlayan nedensellik.

Bu durumda temel sorun, programın etkinliğini araştırmak ve bu amaca ulaşmak için, bir programın eylemleri ile nihai sonuç arasında nedensel ilişkiler kurmak için mekanizmaları kullanır.

Bu tür bir değerlendirmenin amacı, bir sosyal müdahalenin net etkilerini belirlemek olarak tanımlanabilir. Hedeflerin değerlendirilmesi gibi, bu yaklaşım da programın bitiminden veya aynı adımlardan sonra yapılır.

Değerlendirme süreçleri – Bu tür bir değerlendirme, sosyal programın kapsamını ölçmek, hedefe ne derece ulaştığını belirlemek ve özellikle iç süreçlerini izlemek amacıyla sistematik bir şekilde sosyal programların geliştirilmesini araştırır. Amaç, uygulanmasının önündeki engelleri ve engelleri belirlemek için prosedürlerin geliştirilmesindeki olası kusurları tespit etmek ve olayların ve faaliyetlerin kaydı yoluyla yeniden programlamanız için önemli veriler oluşturmaktır.

Böylece programın geliştirilmesi sırasında üretilen bilgilerin uygun kullanımı, yürütme sırasında içeriğinde değişikliklere izin verir. Bu nedenle, önceki yaklaşımlardan farklı olarak, bu değerlendirme yöntemi, biçimlendirici değerlendirme olarak da adlandırılan programın geliştirilmesiyle eş zamanlı olarak gerçekleştirilir. Ancak uygulanması, programın akışlarını ve süreçlerini tasarlayabilmemizi gerektirir.

Ayrıca, uygun olduğunda yöneticilerin ve değerlendiricilerin çalışmalarına temel teşkil eden yeterli yönetim bilgi sisteminin varlığını varsayar.

Sosyal programların değerlendirilmesi metodolojisinin bir uygulaması:

Sonuçların ve değerlendirme süreçlerinin değerlendirilmesini sağlayan metodolojileri kullanan kapsamlı bir değerlendirme sistemi. Ayrıca, önerilen modelde kullanılan ayarlar ve işlem biçimleri.

Sonuçların değerlendirilmesi:

Burada sonuçlar, kısa vadeli sonuçlar, sonuçlar (etkiler) ve uzun vadeli orta vadeli sonuçlardan (etkiler) oluşan olarak tanımlanır.

Değerlendirme için, programın hedefleriyle ilgili uzun vadeli sonuçların ölçülmesi için etki göstergelerinin ve anlık sonuçların ve orta vadeli sonuçların ölçülmesi için çıktı göstergelerinin kullanılması önerilmektedir. Çıktı göstergeleri programın etkilerini ölçer: bir bütün olarak hedef nüfustan ve sizin aranızda

programın sunucuları. İlk durumda, alanda araştırma veya veritabanları ve / veya mevcut girişler yardımıyla iki tür çıktı göstergesi yükseltilmelidir:

– Küresel kapsama derecesi:

Program için hedef popülasyonun kapsama oranını ölçer. Hem açık hem de yararlanan insanların fazlası, rotadaki değişikliklerin nedenidir. Birincisi genişleme ihtiyacını, ikincisi ise kaynak israfı olduğunu (hedef nüfus yararlandığı için uygun olmayan);

– Kapsam derecesi programdan farklıdır:

Hedef nüfus önerisinin farklı alt gruplarının katılımını ölçer. Bu oran, programın müşteri seçiminde bölge, yaş, cinsiyet vb. gibi kriterlere göre ayrımcılığı (veya yanlılığı) yansıtabilir. İkinci noktada, yani sonuçların program kullanıcılarına değerlendirilmesi, göstergeleri ölçmek için kullanılabilir. Her programın veya projenin özel hedeflerini dikkate alan faydalar.

Rob Vos (1993), programın kullanıcıları ve hedef nüfus arasında en yaygın olarak kullanılan göstergelere bazı örnekler verir:

1 – beslenme programları için – yaşa, ölüme ve hastalığa göre yetersiz beslenme oranları;

2 – eğitim programları için – okuma yazma bilmeme oranları, tekrarlama, kaçırma; okullaşma katsayıları ve eğitim dereceleri;

3 – sağlık programları – genel olarak ölüm oranları, çocuk ölümleri, anne ölümleri ve doğum, doğurganlık ve doğumda beklenen yaşam süresi;

4 – konut programları için – konut için nicel açık, konut inşaatının kalitesi ve temel hizmetlerin mevcudiyeti. Göstergeler, hedeflere ulaşmak için mevcut girdi araçlarını veya kaynakları gösterir. Kıt kaynaklar ve yetersiz (finansal olarak, işgücü, ekipman vb.). Neredeyse her zaman beklenen sonuçları baltalama eğilimindedir.

Vos (1993), aşağıdakiler gibi en yaygın girdi göstergelerinin bazı örneklerinden bahseder:

a) – beslenme programlarına – kişi başına gıda mevcudiyeti;

b) – eğitim programlarına – öğrenci / öğretmen, öğrenci / okul ilişkisi, okul tarafından sunulan dizi sayısı ve öğrenciler için öğretim materyallerinin mevcudiyeti;

c) – sağlık programları için – kişi başına düşen doktor sayısı, kişi başına sağlık işleri için; kişi başına yatak sayısı ve kişi başına düşen aşı sayısı.

Ancak erişim göstergeleri, öngörülen hedeflere ulaşmak için programlarda mevcut kaynakları etkin bir şekilde kullanan belirleyicileri belirlemelidir. En yaygın olanları:

a) – sağlık programlarına – yetişkin eşdeğeri başına tıbbi konsültasyon sayısı; en yakın sağlık hizmetine uzaklık, aile başına harcanabilir gelir (örneğin ilaçların satın alınmasını kolaylaştırmak için yararlıdır) ve kültürel faktörler;

b) – eğitim programları için – okuldan uzak, müfredat yeterliliği ve aile için mevcut gelir (örneğin, okul malzemelerinin satın alınmasını sağlamak için).

Ayrıca, anketlerin kullanımı, kalitenin iyi bir göstergesi olmakla birlikte, tek veya en eksiksiz değil, müşterinin memnuniyetini sağlar. Bu anlamda, hizmetin özelliklerinden tanımlanan bir dizi nitelik tarafından oluşturulan endekslerin oluşturulması yoluyla bileşik göstergeler oluşturmak hala mümkündür.

Değerlendirme Süreci Değerlendirme süreci, planlandığı gibi yürütüldüğü bir kamu programının gerçek içeriğini, hedeflenen kitleye ulaşıp ulaşmadığını ve faydaların planlanan yoğunlukta dağıtılıp dağıtılmadığını belirlemenin bir yolu olarak tanımlanabilir (Scheirer, 1994:40).

 

Artur Victoria