Değişen Madde Fonksiyonunun Belirlenmesinde Kullanılan Yöntemlerde I. Tip Hata ve Güç Çalışması

Type I Error Rates and Power Study of Several Differential Item Functioning Determination Methods

Özet

Bu çalışmada, Değişen Madde Fonksiyonunun belirlenmesinde kullanılan çeşitli yöntemlerin belirlikoşullardaki I. Tip hata ve güç oranlarının belirlenmesi amaçlanmıştır. I. Tip hata ve güç oranlarınınbelirlenmesi simülasyon çalışmasıyla yapılmıştır. Klasik Test Kuramı’nadayalı değişen madde fonksiyonununbelirlenmesinde kullanılan yöntemlerde, örneklem büyüklüğünün, madde sayısının, referans grubundakiörneklem büyüklüğünün toplam örneklem büyüklüğüne oranlarının değişimlenmesinin 1. Tip hata oranlarıortalamalarını çok fazla değiştirmediği görülmektedir. Madde Tepki Kuramı’nadayalı değişen maddefonksiyonunun belirlenmesinde kullanılan yöntemlerde ise, örneklem büyüklüğünün artmasıyla I. Tip hataoranlarının ortalamasının azaldığı, madde sayısının artmasıyla I. Tip hata oranlarının ortalamasınındeğişmediği ve referans ve odak gruplardaki örneklem büyüklüğü oranlarının eşit olduğu koşulda I. Tip hataoranları ortalamasının daha düşük olduğu görülmektedir. Güç oranlarının belirlenmesi için yapılan çalışmada,hem Klasik Test Kuramı'na hem de Madde Tepki Kuramı'na dayalı değişen madde fonksiyonu belirlenmesindekullanılan yöntemlerde, örneklem büyüklüğünün ve değişen madde fonksiyonu miktarının artmasıyla güçoranlarının ortalamasının da arttığı görülmektedir. Tüm yöntemlerde, madde sayısının değişimlenmesinin güçoranlarının ortalamalarını çok fazla değiştirmediği, ayrıca, değişen madde fonksiyonlu madde sayısınınoranının arttırılmasının ve referans ve odak gruplardaki örneklem büyüklüğü oranlarının farklı olması güçoranlarının ortalamasını azalttığı görülmektedir.

Abstract

In this study Type I Error rates and power study of several differential item functioning determination methods were investigated for several conditions. For this purpose simulation studies were conducted for methods which belong to Classical Test Theory (CTT) and Item Response Theory (IRT). The results for Type I Error rates of differential item functioning determination methods under the framework of CTT show that none of manipulation criteria have significant effect on average Type I Error rates. For IRT based methods it has been observed that the increase of sample size causes the decrease of average Type I error rates while increasing the number of items has no significant effect on average Type I Error rates, and that the equal ratio of reference and focal sample sizes cause lower average Type I error rates. The results for power study for both differential item functioning determination methods of CTT and IRT show that the increase of sample size and the magnitude of differential item functioning cause the increase of average power rates. No significant effect of the number of items on average power rates could be observed.