BigCat Research

Değişim hangi nicel ve nitel kanıtlarla destekleniyor?

Değişim, nicel göstergelerin yönü ve nitel anlatıların nedeni birlikte okunduğunda güvenilir hale gelir.

Nicel veri değişimin büyüklüğünü ve yaygınlığını gösterir; nitel veri ise bu değişimin nasıl yaşandığını ve neden oluştuğunu açıklar. Biri olmadan diğeri eksik kalabilir. Yalnızca sayı kullanıldığında bağlam zayıflar, yalnızca anlatı kullanıldığında genellenebilirlik sınırlanır. İyi değerlendirme iki kanıt türünü aynı sonuç mantığında buluşturur.

Değişimin hangi nicel ve nitel kanıtlarla desteklendiği, etki raporunun güvenilirliğini doğrudan belirler. Etkiyi anlamak için faaliyetleri saymak yeterli değildir. Katılımın niteliği, hedef grubun başlangıç noktası, uygulamanın kalitesi ve sonuçların ne kadar sürdüğü birlikte görülmelidir.

Bu çalışma anket sonuçları, katılım ve takip kayıtları, faydalanıcı görüşmeleri, saha notları, uygulayıcı değerlendirmeleri ve belge kanıtlarını birlikte kullanmalıdır. Bu tür çalışmalarda ölçüm dili kadar yorum disiplini de önemlidir. Güçlü bulgu sahiplenilmeli, sınırlı bulgu abartılmamalı, takip isteyen sonuç açıkça belirtilmelidir.

Değişimi anlatmak için tek bir kanıt türüne yaslanmak çoğu zaman yetersizdir. Bu okuma Elde edilen etki nasıl sade, güvenilir ve paylaşılabilir bir anlatıya dönüşmeli, Program hedeflerine ne ölçüde ulaştı ve hangi takip göstergeleri bunu destekliyor, Hangi faaliyet, modül, bölge veya hedef grup daha güçlü sonuç üretti ve Uygulama sürecinde hangi varsayımlar doğrulandı, hangileri revize edilmelidir başlıklarıyla yan yana geldiğinde daha tamamlanmış bir çerçeve verir; çünkü her biri deneyimin başka bir anını görünür kılar. Sonuçta değerlendirme, programı parlatma metni değil, öğrenme ve kaynak kullanımı aracı olmalıdır. Bu duruş, güçlü sonuçları da eksik kalan alanları da daha inandırıcı kılar.

Nicel kanıt ne taşır?

Nicel kanıt değişimin kaç kişide, hangi düzeyde ve hangi kırılımda oluştuğunu gösterir. Takip ihtiyacı varsa bu zayıflık gibi yazılmamalıdır. Bazı değişimler kapanış anında değil, birkaç ay sonra davranışa veya kapasiteye dönüştüğünde anlam kazanır.

Bu veri programın kapsamı ve yaygın etkisi için önemlidir. Böyle kurulan metin hem güçlü tarafı sahiplenir hem de eksik kalan noktayı gizlemeden geliştirilecek alana çevirir.

Sonuçlar hedef gruplar arasında farklılaşıyorsa bu fark raporun kenar notu olarak kalmamalıdır. Bazı gruplar daha yoğun desteğe, bazıları farklı içerik sırasına, bazıları ise daha uzun takip dönemine ihtiyaç duyabilir. Bu bilgi kaynak kullanımını doğrudan etkiler.

Nitel kanıt ne tamamlar?