Madde ön-bilgisi kaynaklı test hilesinin madde tepki süresi modeli kullanılarak farklı koşullar altında incelenmesi


Tezin Türü: Doktora

Tezin Yürütüldüğü Kurum: Ankara Üniversitesi, Eğitim Bilimleri Enstitüsü, EĞİTİM BİLİMLERİ ANABİLİM DALI, Türkiye

Tezin Onay Tarihi: 2021

Tezin Dili: Türkçe

Öğrenci: EBRU BALTA

Danışman: CELAL DEHA DOĞAN

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

Bu araştırmada, madde tepki ve tepki süresi örüntülerinin birlikte hiyerarşik modellenmesi (HMTK-TS) aracılığıyla madde ön bilgisi kaynaklı test hile davranışlarını tespit etmede, tepki süresi tabanlı Kullback-Leibler yaklaşımının ve L birey uyum istatistiğinin, farklı koşullar altında I. tip hata ve test hilesi belirleme güç oranlarının ortaya konulması amaçlanmaktadır. Araştırmanın amacı doğrultusunda, yöntemlerin, I. Tip hata oranı ortalamalarının elde edilmesi için madde tepkilerinin üç parametreli lojistik model ile tepki sürelerinin de bayesci log-normal tepki süresi modeli ile modellendiği, test uzunluğu (15, 50) ve teşhir olan maddelerin güçlük düzeyi (orta güçlük,zor) koşulları altında 50 yineleme ile 200 veri seti oluşturulmuştur. Yöntemlerin güç oranı ortalamalarının elde edilmesi için ise test uzunluğu, teşhir olan maddelerin güçlük düzeyi, teşhir olan maddelerin oranı (%20, %40 ve %60) ve teşhir olan maddelerin tepki süresi değişimlemesi (random olarak 10 ile 15 saniye arasındaki uniform dağılımdan oluşturma, 20 saniyeye sabitleme, 30 saniyeye sabitleme) koşulları altında 50 yineleme ile 1800 veri seti oluşturulmuştur. Her üretilen veri seti için HMTK-TS model parametreleri kestirimlerinde, Monte Carlo Markov Zinciri (MCMC) yaklaşımı olarak Gibbs örnekleme algoritması kullanılmıştır. Verilerin analizinde, hile senaryosunda, hile yapan bireyler düşük yetenek düzeyindeki bireylerden seçilerek oranı, 1000 örneklem büyüklüğünün %5 'i olacak şekilde hileli veriler oluşturularak yöntemlerin , test hilesi belirleme performansları incelenmiştir. Veri üretiminde ve analizinde R.4.0.1. programı kullanılmıştır. Çalışmanın sonucunda, değişimlenen tüm koşullar altında, uygun olmayan madde tepki ve tepki süresi örüntülerinin tespit edilmesinde, Kullback-Leibler uzaklığının L birey uyum istatistiğine göre daha güçlü olduğu; ancak yüksek I. Tip hata oranı barındırdığı görülmüştür.