Bireye uyarlanmış testlerde madde kullanım sıklığı kontrol yöntemlerinin farklı koşullarda ölçme duyarlılığına ve test güvenliğine etkisi


Tezin Türü: Doktora

Tezin Yürütüldüğü Kurum: Ankara Üniversitesi, Eğitim Bilimleri Enstitüsü, ÖLÇME VE DEĞERLENDİRME ANABİLİM DALI, Türkiye

Tezin Onay Tarihi: 2017

Tezin Dili: Türkçe

Öğrenci: RECEP GÜR

Danışman: HAMİDE DENİZ GÜLLEROĞLU

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

Bu çalışmada, bilgisayar ortamında bireye uyarlanmış test (BOBUT) uygulamalarında iki kategorili (1-0) puanlanan maddelerde madde kullanım sıklığı kontrol yöntemlerinin farklı ölçme koşullarında (farklı yetenek dağılımlarında, test uzunluklarında ve örneklem büyüklüklerinde) ölçme duyarlılığına ve test güvenliğine etkisinin incelenmesi amaçlanmıştır. Monte Carlo simülasyon çalışması olan bu araştırma, kuramsal bir araştırma olup çalışma kapsamında kısa test 25 madde, uzun test 50 madde; küçük örneklem 250 birey, geniş örneklem 1000 birey olarak belirlenmiştir. Testi alan bireylerin yetenek parametreleri, her bir örneklem büyüklüğü koşulu için (θ) değeri -3 ve +3 aralığında sırasıyla sağa çarpık, normal, tek biçimli ve sola çarpık dağılım gösterecek şekilde BOBUT örneklemleri oluşturulmuştur. Araştırmada kullanım sıklığının kontrol edilmediği durum referans olarak alınmış ve madde kullanım sıklığı kontrol yöntemlerinden Sympson Hetter stratejisi ve Aşamalı Düşürme yöntemi tercih edilmiştir. Araştırma kapsamında yer alan değişkenler ve koşullar çaprazlandığında 48 simülasyon koşulu belirlenmiş ve her bir koşulda 100 tekrar yapılarak 4800 veri dosyası oluşturulmuştur. Her bir koşul için ölçme duyarlılığı ve test güvenliği indeksleri hesaplanıp birbirleriyle karşılaştırılmıştır. Yapılan analizler sonucunda, farklı madde kullanım sıklığı kontrolü koşullarında ölçme duyarlılıkları arasında genel olarak büyük farklılık bulunmamıştır. İlgili koşullarda madde kullanım sıklığı kontrol yöntemlerinden Aşamalı Düşürme yöntemi seçildiğinde, test güvenliği daha iyi sağlanarak madde kullanım sıklığı dengeli dağılım gösterdiğinden madde havuzu kullanımının daha verimli hale geldiği ve madde havuzu ifşâ olmadan birçok uygulama için süreklilik sağlayabildiği saptanmıştır. Bu doğrultuda, BOBUT uygulamalarında farklı ölçme koşullarında, madde kullanım sıklığı kontrol yöntemlerinden BOBUT uygulamasından önce, tekrarlı simülasyonlarla kullanım sıklığı kontrol parametrelerinin belirlendiği, BOBUT uygulamalarında en yaygın kullanılan Sympson Hetter stratejisi yerine, BOBUT uygulanma sürecinde kullanım sıklığı kontrol parametrelerinin eş zamanlı olarak belirlendiği Aşamalı Düşürme yöntemi seçildiğinde, ölçme duyarlılığını düşürmeden madde havuzunu daha dengeli kullanarak test güvenliğinin daha iyi sağlandığı sonucuna ulaşılmıştır. Anahtar Kelimeler: Bilgisayar Ortamında Bireye Uyarlanmış Test, Madde Kullanım Sıklığı Kontrol Yöntemi, Sympson Hetter yöntemi, Aşamalı Düşürme Stratejisi