Alanlara Göre · Orta · 3 dk okuma
Eğitimde test ve ölçek geliştirme
Bir ölçme aracının kanıtı, uzman görüşünden güvenirliğe kadar sırayla toplanır.
Likert tipi ölçek geliştirme sırası
- Madde havuzu ve uzman görüşü: Lawshe kapsam geçerlik oranı (KGO) ve indeksi (KGİ). Ücretsiz Lawshe aracıyla hesaplanır.
- Ön uygulama ve veri hazırlık: geçersiz değerler, eksik veri, özensiz yanıt, ters maddeler.
- Yapı geçerliği: açımlayıcı faktör analizi (AFA); farklı bir örneklemde ya da örneklemin öbür yarısında doğrulayıcı faktör analizi (DFA).
- Güvenirlik: her alt boyut için Cronbach α ve McDonald ω.
- Kararlılık: 2–4 hafta arayla test–tekrar test; ICC(2,1), ölçümün standart hatası (SEM) ve en küçük saptanabilir değişim.
- Gruplar arası karşılaştırma yapılacaksa ölçme değişmezliği (çok gruplu DFA).
Başarı testi geliştirme
Doğru–yanlış puanlanan testlerde madde istatistikleri, alt ve üst %27'lik gruplar karşılaştırılarak hesaplanır. Ham yanıtlar (A, B, C, D) ve cevap anahtarı verilirse çeldiricilerin işleyip işlemediği de görülür: iyi bir çeldiriciyi alt gruptaki öğrenciler üst gruptakilerden daha sık seçer.
| Ayırt edicilik (D) | Karar |
|---|---|
| .40 ve üstü | Çok iyi madde |
| .30–.39 | İyi madde |
| .20–.29 | Düzeltilmeli |
| < .20 | Testten çıkarılmalı |
Puanlayıcı uyumu
Örnek
Üç öğretmen 40 öğrencinin kompozisyonunu 1–5 arası bir rubrikle puanladı. Puanlar sıralı olduğu için Fleiss κ'nın yanında Kendall W da raporlanır; iki puanlayıcı olsaydı kareli ağırlıklı κ kullanılırdı. κ = .62 orta-iyi bir uyumu gösterir (Landis ve Koch, 1977).
Sık yapılan hatalar
- Uzman görüşünü yalnız “uygun / uygun değil” diye özetleyip KGO hesaplamamak.
- AFA ve DFA'yı aynı örneklemde yapıp DFA'yı doğrulama kanıtı saymak.
- Başarı testinde α yerine KR-20 raporlanması gerektiğini atlamak.
İlgili yazılar
Bilmediğiniz bir terim mi var? İstatistik sözlüğüne bakın.
Bu konuda verinizle destek almak ister misiniz?
Danışma başlat