The Comparison of Item And Ability Estimations Calculated From The Parametric and Non-Parametric Item Response Theory According to The Several Factors

Parametrik ve Parametrik Olmayan Madde Tepki Kuramı Modellerinden Çeşitli Faktörlere Göre Elde Edilen Madde ve Yetenek Kestirimlerinin Karşılaştırılması

Abstract

This study aimed to compare the item and ability parameters estimated from two different approaches of Item Response Theory, which are parametric and non-parametric, according to the factors of test length, sample size and the item psychometric qualities. The study was prepared in a basic research method and the data of the study is obtained from the Trends of International Mathematics and Science (TIMSS) 2011 application. From the main data set, 16 different data sets were formed according to the research questions and the conditions of the factors. The results showed that all of the item parameters estimated according to the parametric and non-parametric models from the data sets which are composed of different number of items and sample sizes were correlated significantly and highly. Among of the abilities estimated by non-parametric models in all sample size and test length factors, it was concluded that ability parameters are significantly and highly correlated. To sum up, it was found that both approaches had resulted in so highly and significantly correlated item and ability parameters. This finding showed that if the assumptions of parametric item response theory models are not met as a required level, the non-parametric alternative models can be used in the conditions that studied in this research.

Özet

Bu araştırmada, Madde Tepki Kuramı kapsamında yer alan iki farklı yaklaşım olan Parametrik MaddeTepki Kuramı (PMTK) ve Parametrik Olmayan Madde Tepki Kuramı (POMTK) modellerinden kestirilenmadde ve yetenek parametrelerinin test uzunluğu, örneklem büyüklüğü ve maddelerin psikometriknitelikleri faktörlerine göre karşılaştırılması amaçlanmıştır. Temel araştırma niteliğinde olanaraştırmanın verileri Uluslararası Matematik ve Fen Eğilimleri Araştırması’nın (Trends of InternationalMathematics and Science-TIMSS) 2011 yılındaki uygulamasından elde edilmiştir. Çeşitli kriterler dikkatealınarak oluşturulan veri setinden çalışmanın amaçları ve incelemeye alınan faktörlerin koşullarıgözetilerek 16 ayrı veri seti oluşturulmuştur. Elde edilen sonuçlar incelendiğinde, her iki yaklaşıma görefarklı örneklem büyüklüğünden kestirilen madde parametreleri arasında yüksek düzeyde ve manidar biruyum olduğu belirlenmiştir. Test uzunluğu ve örneklem büyüklüğü koşullarının birlikte incelendiği verisetleri için ise PMTK ve POMTK modellerinden kestirilen madde parametreleri arasında yüksek düzeydeve manidar ilişkiler olduğu bulunmuştur. Özetle her iki yaklaşıma göre farklı koşullar altında kestirilenmadde ve yetenek parametreleri birbirleri ile yüksek düzeyde ve manidar ilişkiler göstermiştir.Böylelikle PMTK modellerinin varsayımları veri setleri için yeterli düzeyde karşılanmadığında, incelenenkoşullara uygun durumlarda POMTK yaklaşımının tercih edilebileceği sonucuna ulaşılmıştır.