Comparing different diffential item functioning methods: A simulation study

Değişen madde fonksiyonunun belirlenmesinde kullanılan farklı yöntemlerin karşılaştırılması: Bir simülasyon çalışması

Abstract

The primary purpose of this research is to compare and evaluate the effectiveness of observed score methods -Mantel-Haenszel. logistic regression- and latent score methods -IRT-LR, SIBTEST- which used to determine DIF under variety conditions. These methods were compared by simulation study. Sample sizes, ability distribution, proportion of items with DIF were considered for data simulation conditions. Results of this research revealed that latent score methods were more sensitive and effective in determining items with DIF rather than observed score methods. Latent score methods were more liberal and observed score methods were more conservative in identifying items with DIF. As a result, MH, SIBTEST and 1RT-LR methods present consistent result in determining uniform DIF in all conditions, l^urthermore. consistent results were found in identifying non-uniform DIF with LR, SIBTEST and IRT-LR methods.

Özet

Bu araştırmanın amacı değişen madde fonksiyonunun (DMF) belirlenmesinde kııllanilan gözlenen puan yöntemlerinden Mantel-Haenszel ve lojistik regresyotı yöntemleri ile örtük puan yöntemlerinden MTK-00 ve SİBTFST yöntemlerinin karşılaştırılmasıdır. Yöntemlerin karşılaştırılması simulasyon çalışmasıyla yapılmıştır. Simıılasyon koşulları önıeklem büyüklüğü, yetenek dağılımı ve testteki DMF'li madde oranıdır. Araştırmada kullanılan örtük puan yöntemlerinin gözlenen puan yöntemlerine göre DMF'li maddeleri belirlemede daha duyarlı ve etkili olduğu görülmüştür. Araştırmada. UVnin diğer yöntemlere göre DMF belirleme oranının daha diişiik olduğu, MTK-00'nun ise daha yükseli olduğu sonucuna varılmıştır Tek biçimli DMF'yi belirlemede MH, SİBTEST ve MTK-00 yöntemleri; tek biçimli olmayan DM'F'yi belirlemede ise U SIBTEST ve MTK-00 yöntemleri birbiriyle uyumlu sonuçlar vermiştir.