ModMedyan

Alanlara Göre · Orta · 3 dk okuma

Eğitimde test ve ölçek geliştirme

Bir ölçme aracının kanıtı, uzman görüşünden güvenirliğe kadar sırayla toplanır.

Likert tipi ölçek geliştirme sırası

  • Madde havuzu ve uzman görüşü: Lawshe kapsam geçerlik oranı (KGO) ve indeksi (KGİ). Ücretsiz Lawshe aracıyla hesaplanır.
  • Ön uygulama ve veri hazırlık: geçersiz değerler, eksik veri, özensiz yanıt, ters maddeler.
  • Yapı geçerliği: açımlayıcı faktör analizi (AFA); farklı bir örneklemde ya da örneklemin öbür yarısında doğrulayıcı faktör analizi (DFA).
  • Güvenirlik: her alt boyut için Cronbach α ve McDonald ω.
  • Kararlılık: 2–4 hafta arayla test–tekrar test; ICC(2,1), ölçümün standart hatası (SEM) ve en küçük saptanabilir değişim.
  • Gruplar arası karşılaştırma yapılacaksa ölçme değişmezliği (çok gruplu DFA).

Başarı testi geliştirme

Doğru–yanlış puanlanan testlerde madde istatistikleri, alt ve üst %27'lik gruplar karşılaştırılarak hesaplanır. Ham yanıtlar (A, B, C, D) ve cevap anahtarı verilirse çeldiricilerin işleyip işlemediği de görülür: iyi bir çeldiriciyi alt gruptaki öğrenciler üst gruptakilerden daha sık seçer.

Ayırt edicilik (D)Karar
.40 ve üstüÇok iyi madde
.30–.39İyi madde
.20–.29Düzeltilmeli
< .20Testten çıkarılmalı

Puanlayıcı uyumu

Örnek

Üç öğretmen 40 öğrencinin kompozisyonunu 1–5 arası bir rubrikle puanladı. Puanlar sıralı olduğu için Fleiss κ'nın yanında Kendall W da raporlanır; iki puanlayıcı olsaydı kareli ağırlıklı κ kullanılırdı. κ = .62 orta-iyi bir uyumu gösterir (Landis ve Koch, 1977).

Sık yapılan hatalar

  • Uzman görüşünü yalnız “uygun / uygun değil” diye özetleyip KGO hesaplamamak.
  • AFA ve DFA'yı aynı örneklemde yapıp DFA'yı doğrulama kanıtı saymak.
  • Başarı testinde α yerine KR-20 raporlanması gerektiğini atlamak.

İlgili yazılar

Bilmediğiniz bir terim mi var? İstatistik sözlüğüne bakın.

Bu konuda verinizle destek almak ister misiniz?

Danışma başlat