Arda
New member
Planlanan 100 teslimatın 90'ı zamanında tamamlanmışsa oran yüzde 90'dır. Bu hesaplama, proje performansını izlemek için kullanışlıdır; fakat tek başına bütün kalite boyutlarını ölçmez.
Daha kapsamlı bir değerlendirmede aşağıdaki göstergeler bir arada kullanılabilir:
- Miktar: Planlanan kaç çıktı üretildi?
- Kalite: Üretilen çıktılar önceden belirlenen teknik ve bilimsel standartları karşılıyor mu?
- Zaman: Teslimatlar planlanan takvime uygun biçimde tamamlandı mı?
- Maliyet: Çıktılar için kullanılan kaynaklar bütçeyle uyumlu mu?
- Kullanılabilirlik: Çıktılar hedef kullanıcıların ihtiyaçlarını karşılıyor mu?
- Sürdürülebilirlik: Çıktılar proje bittikten sonra da kullanılabiliyor mu?
Proje başarısının değerlendirilmesine ilişkin sistematik literatür incelemeleri de zaman, maliyet ve performans ölçütlerinin önemli olmakla birlikte tek başına yeterli olmadığını gösterir. 2017 yılında International Journal of Managing Projects in Business dergisinde yayımlanan Evaluation of project success: a structured literature review başlıklı çalışma, proje başarısı ölçütlerinin zaman içinde genişlediğini ve paydaş memnuniyetinin de değerlendirmelerde önem kazandığını ortaya koymaktadır. Araştırmanın yayın kaydı.
Bu bulgu, sayısal verilerin vazgeçilmez olduğunu ancak yorumlanmadan anlam kazanmadığını düşündürür. Bir projenin bütçeyi aşmaması olumlu olabilir; buna karşılık maliyet tasarrufu uğruna kullanıcı güvenliğinin veya erişilebilirliğin göz ardı edilmesi kabul edilebilir bir başarı değildir.
5. Nicel ve Nitel Araştırma Yöntemlerinin Birlikte Kullanılması
Proje çıktılarının bilimsel değerlendirilmesinde nicel ve nitel araştırma yöntemleri farklı fakat birbirini tamamlayan işlevlere sahiptir.
Nicel yöntemler, ölçülebilir değişkenleri analiz ederek sonuçların büyüklüğü ve dağılımı hakkında bilgi verir. Anket puanları, hata oranları, üretim miktarları ve maliyet değişimleri bu kapsamda değerlendirilebilir. İstatistiksel analizler, gözlenen farklılıkların rastlantısal değişkenlikle ne ölçüde açıklanabileceğini incelemeye yardımcı olur.
Nitel yöntemler ise sayıların arkasındaki nedenleri anlamaya odaklanır. Kullanıcı görüşmeleri, odak grup çalışmaları ve gözlemler aracılığıyla bir çıktının neden kullanılmadığı, hangi ihtiyaçları karşılamadığı veya farklı gruplar tarafından nasıl deneyimlendiği araştırılabilir.
Örneğin bir kamu kurumunun geliştirdiği çevrim içi başvuru sistemi, başvuru süresini ortalama 20 dakikadan 8 dakikaya düşürmüş olabilir. Bu, işlem verimliliği açısından olumlu bir göstergedir. Ancak internet erişimi sınırlı olan vatandaşların sistemi kullanmakta zorlanması, yalnızca işlem sürelerine bakıldığında fark edilmeyebilir.
Bu nedenle karma yöntem yaklaşımı özellikle değerlidir. Araştırmacı önce sistem kayıtlarından işlem sürelerini ve başarısız başvuru oranlarını analiz edebilir; ardından farklı kullanıcı gruplarıyla görüşerek sonuçların nedenlerini inceleyebilir. İki veri türünün birlikte değerlendirilmesi, hem ölçülebilir performans hem de insan deneyimi hakkında daha bütünlüklü bir açıklama sağlar.
Mantıksal model yaklaşımı da bu süreci destekler. Horstman ve çalışma arkadaşlarının 2026 tarihli Journal of Hospital Medicine dergisinde yayımlanan yöntem notu, girdiler, faaliyetler, çıktılar, sonuçlar ve etkiler arasındaki ilişkilerin açıkça modellenmesinin planlama ve değerlendirme açısından önemini ele alır. Bu yaklaşım, proje ekibinin hangi faaliyetlerin hangi çıktıları üretmesinin beklendiğini ve bu çıktılardan hangi sonuçların doğmasının öngörüldüğünü sistematik biçimde açıklamasına yardımcı olur. Yöntem yazısı.
Bununla birlikte her yöntemin sınırları vardır. Anketlerde katılımcıların gerçekte yaptıklarıyla yaptıklarını söyledikleri farklılaşabilir. Görüşmelerde araştırmacının yorumları sonuçları etkileyebilir. İstatistiksel analizlerde ise eksik veri, örneklem seçimi ve ölçüm hataları yanıltıcı sonuçlara yol açabilir. Bilimsel güvenilirlik, bu sınırlamaların saklanmasıyla değil, açıkça belirtilmesiyle güçlenir.
6. Veri Odaklı Analiz ve İnsan Odaklı Değerlendirme: Cinsiyet Kalıplarının Ötesinde
Proje çıktılarının değerlendirilmesinde analitik düşünme ile sosyal duyarlılığı birlikte ele almak gerekir. Veri analizi; performansın ölçülmesini, alternatiflerin karşılaştırılmasını ve kaynakların etkin kullanılmasını sağlar. Empati, katılımcıların deneyimlerini anlamak, farklı ihtiyaçları belirlemek ve beklenmeyen toplumsal sonuçları fark etmek açısından önemlidir.
Ancak bu iki yaklaşımı erkeklere ve kadınlara doğuştan ait özelliklermiş gibi ayırmak bilimsel açıdan doğru değildir. Erkeklerin daha analitik, kadınların ise daha empatik olduğu yönündeki genellemeler, bireysel farklılıkları ve toplumsal koşulları göz ardı eder. Veri odaklı düşünme veya sosyal etkilere duyarlılık, kişinin cinsiyetinden hareketle güvenilir biçimde tahmin edilemez.
Daha dengeli bir yaklaşım, farklı bakış açılarını proje değerlendirmesine bilinçli olarak dahil etmektir. Örneğin teknik ekip, geliştirilen ürünün performansını ve hata oranlarını inceleyebilir. Kullanıcı temsilcileri ise ürünün farklı yaş grupları, engelli bireyler veya dijital okuryazarlığı sınırlı kişiler açısından ne kadar erişilebilir olduğunu değerlendirebilir. Bu sorumluluklar kadınlara ya da erkeklere özgü değildir; uzmanlık, deneyim ve katılım temelinde paylaşılmalıdır.
OECD'nin Applying Evaluation Criteria Thoughtfully başlıklı değerlendirme rehberi, sonuçların farklı gruplar üzerindeki etkilerinin incelenmesini ve cinsiyet eşitliği gibi konuların değerlendirme süreçlerine dahil edilmesini önerir. Rehberin önemli bir noktası, bir müdahalenin genel olarak başarılı görünmesinin bütün grupların eşit ölçüde yarar sağladığını göstermemesidir. OECD değerlendirme rehberi.
Örneğin bir eğitim projesinde katılımcıların yüzde 80'inin eğitimi tamamlaması olumlu bir çıktı göstergesidir. Ancak tamamlama oranı farklı gruplarda belirgin biçimde değişiyorsa bunun nedenleri araştırılmalıdır. Ulaşım koşulları, bakım sorumlulukları, eğitim saatleri, fiziksel erişilebilirlik ve internet bağlantısı gibi etkenler katılımı etkileyebilir. Bu faktörlerin hangilerinin geçerli olduğu ise varsayımlarla değil, uygun verilerle incelenmelidir.
Dolayısıyla iyi bir proje değerlendirmesi, yalnızca "Kaç kişiye ulaştık?" sorusunu değil, "Kimlere ulaşamadık, neden ulaşamadık ve bu durum sonuçları nasıl etkiledi?" sorularını da içerir. Böyle bir yaklaşım, sayısal analizden vazgeçmeden toplumsal gerçekliği dikkate alır.
7. Gerçek Hayattan Örneklerle Proje Çıktısının Önemi
Proje çıktılarının farklı alanlarda nasıl yorumlandığını görmek, kavramın pratik değerini daha iyi anlamamızı sağlar.
Eğitim projeleri: Bir eğitim projesinde hazırlanan ders içerikleri, öğretmen kılavuzları ve çevrim içi öğrenme modülleri doğrudan çıktılardır. Öğrencilerin sınav başarısındaki artış ise sonuç göstergesi olabilir. Başarıdaki değişimin projeden kaynaklanıp kaynaklanmadığını anlamak için başlangıç ve bitiş ölçümleri, uygun karşılaştırmalar ve öğrenme ortamına ilişkin bilgiler değerlendirilmelidir.
Sağlık projeleri: Bir sağlık bilgilendirme projesinin çıktıları broşürler, eğitim oturumları ve dijital bilgilendirme araçları olabilir. Bu materyallerin hazırlanmış olması, insanların doğru sağlık davranışlarını benimsediğini kanıtlamaz. Bilginin anlaşılması, hatırlanması ve davranışa dönüşmesi ayrıca araştırılmalıdır.
Yazılım projeleri: Yazılımın tamamlanması, test belgelerinin hazırlanması ve kullanıcı kılavuzlarının sunulması temel çıktılardır. Bununla birlikte uygulamanın güvenli, erişilebilir ve kullanıcı ihtiyaçlarına uygun olması da kalite değerlendirmesinin parçasıdır. İndirme sayısı veya kullanıcı hesabı sayısı, aktif kullanımın ve kullanıcı memnuniyetinin doğrudan karşılığı değildir.
Daha kapsamlı bir değerlendirmede aşağıdaki göstergeler bir arada kullanılabilir:
- Miktar: Planlanan kaç çıktı üretildi?
- Kalite: Üretilen çıktılar önceden belirlenen teknik ve bilimsel standartları karşılıyor mu?
- Zaman: Teslimatlar planlanan takvime uygun biçimde tamamlandı mı?
- Maliyet: Çıktılar için kullanılan kaynaklar bütçeyle uyumlu mu?
- Kullanılabilirlik: Çıktılar hedef kullanıcıların ihtiyaçlarını karşılıyor mu?
- Sürdürülebilirlik: Çıktılar proje bittikten sonra da kullanılabiliyor mu?
Proje başarısının değerlendirilmesine ilişkin sistematik literatür incelemeleri de zaman, maliyet ve performans ölçütlerinin önemli olmakla birlikte tek başına yeterli olmadığını gösterir. 2017 yılında International Journal of Managing Projects in Business dergisinde yayımlanan Evaluation of project success: a structured literature review başlıklı çalışma, proje başarısı ölçütlerinin zaman içinde genişlediğini ve paydaş memnuniyetinin de değerlendirmelerde önem kazandığını ortaya koymaktadır. Araştırmanın yayın kaydı.
Bu bulgu, sayısal verilerin vazgeçilmez olduğunu ancak yorumlanmadan anlam kazanmadığını düşündürür. Bir projenin bütçeyi aşmaması olumlu olabilir; buna karşılık maliyet tasarrufu uğruna kullanıcı güvenliğinin veya erişilebilirliğin göz ardı edilmesi kabul edilebilir bir başarı değildir.
5. Nicel ve Nitel Araştırma Yöntemlerinin Birlikte Kullanılması
Proje çıktılarının bilimsel değerlendirilmesinde nicel ve nitel araştırma yöntemleri farklı fakat birbirini tamamlayan işlevlere sahiptir.
Nicel yöntemler, ölçülebilir değişkenleri analiz ederek sonuçların büyüklüğü ve dağılımı hakkında bilgi verir. Anket puanları, hata oranları, üretim miktarları ve maliyet değişimleri bu kapsamda değerlendirilebilir. İstatistiksel analizler, gözlenen farklılıkların rastlantısal değişkenlikle ne ölçüde açıklanabileceğini incelemeye yardımcı olur.
Nitel yöntemler ise sayıların arkasındaki nedenleri anlamaya odaklanır. Kullanıcı görüşmeleri, odak grup çalışmaları ve gözlemler aracılığıyla bir çıktının neden kullanılmadığı, hangi ihtiyaçları karşılamadığı veya farklı gruplar tarafından nasıl deneyimlendiği araştırılabilir.
Örneğin bir kamu kurumunun geliştirdiği çevrim içi başvuru sistemi, başvuru süresini ortalama 20 dakikadan 8 dakikaya düşürmüş olabilir. Bu, işlem verimliliği açısından olumlu bir göstergedir. Ancak internet erişimi sınırlı olan vatandaşların sistemi kullanmakta zorlanması, yalnızca işlem sürelerine bakıldığında fark edilmeyebilir.
Bu nedenle karma yöntem yaklaşımı özellikle değerlidir. Araştırmacı önce sistem kayıtlarından işlem sürelerini ve başarısız başvuru oranlarını analiz edebilir; ardından farklı kullanıcı gruplarıyla görüşerek sonuçların nedenlerini inceleyebilir. İki veri türünün birlikte değerlendirilmesi, hem ölçülebilir performans hem de insan deneyimi hakkında daha bütünlüklü bir açıklama sağlar.
Mantıksal model yaklaşımı da bu süreci destekler. Horstman ve çalışma arkadaşlarının 2026 tarihli Journal of Hospital Medicine dergisinde yayımlanan yöntem notu, girdiler, faaliyetler, çıktılar, sonuçlar ve etkiler arasındaki ilişkilerin açıkça modellenmesinin planlama ve değerlendirme açısından önemini ele alır. Bu yaklaşım, proje ekibinin hangi faaliyetlerin hangi çıktıları üretmesinin beklendiğini ve bu çıktılardan hangi sonuçların doğmasının öngörüldüğünü sistematik biçimde açıklamasına yardımcı olur. Yöntem yazısı.
Bununla birlikte her yöntemin sınırları vardır. Anketlerde katılımcıların gerçekte yaptıklarıyla yaptıklarını söyledikleri farklılaşabilir. Görüşmelerde araştırmacının yorumları sonuçları etkileyebilir. İstatistiksel analizlerde ise eksik veri, örneklem seçimi ve ölçüm hataları yanıltıcı sonuçlara yol açabilir. Bilimsel güvenilirlik, bu sınırlamaların saklanmasıyla değil, açıkça belirtilmesiyle güçlenir.
6. Veri Odaklı Analiz ve İnsan Odaklı Değerlendirme: Cinsiyet Kalıplarının Ötesinde
Proje çıktılarının değerlendirilmesinde analitik düşünme ile sosyal duyarlılığı birlikte ele almak gerekir. Veri analizi; performansın ölçülmesini, alternatiflerin karşılaştırılmasını ve kaynakların etkin kullanılmasını sağlar. Empati, katılımcıların deneyimlerini anlamak, farklı ihtiyaçları belirlemek ve beklenmeyen toplumsal sonuçları fark etmek açısından önemlidir.
Ancak bu iki yaklaşımı erkeklere ve kadınlara doğuştan ait özelliklermiş gibi ayırmak bilimsel açıdan doğru değildir. Erkeklerin daha analitik, kadınların ise daha empatik olduğu yönündeki genellemeler, bireysel farklılıkları ve toplumsal koşulları göz ardı eder. Veri odaklı düşünme veya sosyal etkilere duyarlılık, kişinin cinsiyetinden hareketle güvenilir biçimde tahmin edilemez.
Daha dengeli bir yaklaşım, farklı bakış açılarını proje değerlendirmesine bilinçli olarak dahil etmektir. Örneğin teknik ekip, geliştirilen ürünün performansını ve hata oranlarını inceleyebilir. Kullanıcı temsilcileri ise ürünün farklı yaş grupları, engelli bireyler veya dijital okuryazarlığı sınırlı kişiler açısından ne kadar erişilebilir olduğunu değerlendirebilir. Bu sorumluluklar kadınlara ya da erkeklere özgü değildir; uzmanlık, deneyim ve katılım temelinde paylaşılmalıdır.
OECD'nin Applying Evaluation Criteria Thoughtfully başlıklı değerlendirme rehberi, sonuçların farklı gruplar üzerindeki etkilerinin incelenmesini ve cinsiyet eşitliği gibi konuların değerlendirme süreçlerine dahil edilmesini önerir. Rehberin önemli bir noktası, bir müdahalenin genel olarak başarılı görünmesinin bütün grupların eşit ölçüde yarar sağladığını göstermemesidir. OECD değerlendirme rehberi.
Örneğin bir eğitim projesinde katılımcıların yüzde 80'inin eğitimi tamamlaması olumlu bir çıktı göstergesidir. Ancak tamamlama oranı farklı gruplarda belirgin biçimde değişiyorsa bunun nedenleri araştırılmalıdır. Ulaşım koşulları, bakım sorumlulukları, eğitim saatleri, fiziksel erişilebilirlik ve internet bağlantısı gibi etkenler katılımı etkileyebilir. Bu faktörlerin hangilerinin geçerli olduğu ise varsayımlarla değil, uygun verilerle incelenmelidir.
Dolayısıyla iyi bir proje değerlendirmesi, yalnızca "Kaç kişiye ulaştık?" sorusunu değil, "Kimlere ulaşamadık, neden ulaşamadık ve bu durum sonuçları nasıl etkiledi?" sorularını da içerir. Böyle bir yaklaşım, sayısal analizden vazgeçmeden toplumsal gerçekliği dikkate alır.
7. Gerçek Hayattan Örneklerle Proje Çıktısının Önemi
Proje çıktılarının farklı alanlarda nasıl yorumlandığını görmek, kavramın pratik değerini daha iyi anlamamızı sağlar.
Eğitim projeleri: Bir eğitim projesinde hazırlanan ders içerikleri, öğretmen kılavuzları ve çevrim içi öğrenme modülleri doğrudan çıktılardır. Öğrencilerin sınav başarısındaki artış ise sonuç göstergesi olabilir. Başarıdaki değişimin projeden kaynaklanıp kaynaklanmadığını anlamak için başlangıç ve bitiş ölçümleri, uygun karşılaştırmalar ve öğrenme ortamına ilişkin bilgiler değerlendirilmelidir.
Sağlık projeleri: Bir sağlık bilgilendirme projesinin çıktıları broşürler, eğitim oturumları ve dijital bilgilendirme araçları olabilir. Bu materyallerin hazırlanmış olması, insanların doğru sağlık davranışlarını benimsediğini kanıtlamaz. Bilginin anlaşılması, hatırlanması ve davranışa dönüşmesi ayrıca araştırılmalıdır.
Yazılım projeleri: Yazılımın tamamlanması, test belgelerinin hazırlanması ve kullanıcı kılavuzlarının sunulması temel çıktılardır. Bununla birlikte uygulamanın güvenli, erişilebilir ve kullanıcı ihtiyaçlarına uygun olması da kalite değerlendirmesinin parçasıdır. İndirme sayısı veya kullanıcı hesabı sayısı, aktif kullanımın ve kullanıcı memnuniyetinin doğrudan karşılığı değildir.