Dergiler / Adıyaman Üniversitesi Eğitim Bilimleri Dergisi / 2023 / Cilt: 13 Sayı: 1

Çok Boyutlu Testlere Uygulanan Çok Boyutlu Ölçek Dönüştürme Yöntemlerinin Çeşitli Koşullara Göre İncelenmesi

Investigation of Multidimensional Scale Transformation Methods Applied to Multidimensional Tests According to Various Conditions

Sayfa
41–53
Yayın Tarihi
2023-06-28
DOI
—
🏛️Bu makalenin bibliyografik verileri ve tam metin bağlantısı DergiPark üzerinden sağlanmıştır.
DergiPark Kaydı ↗
✨

Yapay Zeka Hızlı Bakış & Çıkarımlar

AI Insight
⚡ TL;DR(1 Cümlede Hızlı Çıkarım)

Güçlük ve yetenek parametrelerinin kestiriminde Stocking-Lord yöntemi için 2PLM’de, ortalama-ortalama ve ortalama-sigma yöntemleri için 3PLM’de daha düşük RMSE değerleri elde edilmiştir.

📌 3 Maddede Bu Makale

🎯
Amaç & Hipotez:Bu çalışma kapsamında çok boyutlu iki test formuna çeşitli koşullar altında ölçek dönüştürme yapılıp, elde edilen madde ve yetenek parametrelerine ait eşitleme hatalarının karşılaştırılması amaçlanmıştır.
📊
Temel Bulgular & Veri:Araştırma koşulları olarak örneklem büyüklüğü (1000-2000), ortak madde oranı (%20 ve %40), boyutlar arası korelasyon (0.1-0.5-0.9) ve parametre kestirim modeli (2PLM-3PLM) alınmıştır.
💡
Sonuç & Katkı:Güçlük ve yetenek parametrelerinin kestiriminde Stocking-Lord yöntemi için 2PLM’de, ortalama-ortalama ve ortalama-sigma yöntemleri için 3PLM’de daha düşük RMSE değerleri elde edilmiştir.
🔬Tür:Uygulamalı Anket & Alan Araştırması
📍Kapsam:2000 Verileri
⚙️Değişkenler:çok boyutluluk · ölçek dönüştürme · ortalama-ortalama

Özet

Bu çalışma kapsamında çok boyutlu iki test formuna çeşitli koşullar altında ölçek dönüştürme yapılıp, elde edilen madde ve yetenek parametrelerine ait eşitleme hatalarının karşılaştırılması amaçlanmıştır. Araştırma koşulları olarak örneklem büyüklüğü (1000-2000), ortak madde oranı (%20 ve %40), boyutlar arası korelasyon (0.1-0.5-0.9) ve parametre kestirim modeli (2PLM-3PLM) alınmıştır. Ölçek dönüştürme sonuçlarının doğruluğunu incelemek amacıyla eşitleme hatası (RMSE) kullanılmıştır. Örneklem büyüklüğü ve ortak madde oranı arttıkça ve boyutlar arası korelasyon azaldıkça RMSE değerinin genel olarak azaldığı görülmüştür. Ortalama-sigma yöntemi kullanıldığına daha yüksek eşitleme hataları elde edilmiştir. Ayırıcılık parametresinin kestiriminde tüm yöntemler için 2PLM’de daha düşük RMSE değerleri elde edilmiştir. Güçlük ve yetenek parametrelerinin kestiriminde Stocking-Lord yöntemi için 2PLM’de, ortalama-ortalama ve ortalama-sigma yöntemleri için 3PLM’de daha düşük RMSE değerleri elde edilmiştir.

Abstract

The purpose of this study was to compare the equating errors of item and ability parameters obtained by performing scale transformation methods to two multidimensional test forms under various conditions. Sample size (1000-2000), common item ratio (20% and 40%), correlation between dimensions (0.1-0.5-0.9) and parameter estimation model (2PLM-3PLM) were taken as research conditions. Equating error (RMSE) was used to examine the accuracy of the scale transformation results. It was observed that the RMSE value generally decreased as the sample size and common item ratio increased and the correlation between dimensions decreased. Higher equating errors were obtained when the mean-sigma method was used. In the estimation of the discrimination parameter, lower RMSE values were obtained in 2PLM for all methods. In the estimation of difficulty and ability parameters, lower RMSE values were obtained in 2PLM for Stocking-Lord method and in 3PLM for mean-mean and mean-sigma methods.

🔖

Bu Makaleye Atıf Yap

ZOR, Y. M. (2023). Çok Boyutlu Testlere Uygulanan Çok Boyutlu Ölçek Dönüştürme Yöntemlerinin Çeşitli Koşullara Göre İncelenmesi. Adıyaman Üniversitesi Eğitim Bilimleri Dergisi, Cilt: 13 Sayı: 1, 41–53. https://ajindex.com/articles/948351

📄 Tam Metin PDF Okuyucu

📄

PDF görüntüleyici hazırlanıyor...

Kaynakça (8)

  1. Ackerman, T. A., Gierl, M. J., & Walker, C. M. (2003). Using multidimensional item response theory to evaluate educational and psychological tests. Educational Measurement: Issues and Practice, 22(3), 37-51.
  2. Angoff, W. H. (1984). Scales,norms and equivalent scores. New Jersey: Educational Testing Service. Atar, B. ve Yeşiltaş, G. (2017). Investigation of the Performance of Multidimensional Equating Procedures for Common-Item Nonequivalent Groups Design. Eğitimde ve Psikolojide Ölçme ve Değerlendirme Dergisi, 8(4), 421-434.
  3. Baker, F. B. & Al-Karni, A. (1991). A comparison of two procedures for computing IRT equating coefficients. Journal of Educational Measurement, 28(2), 147–162.
  4. Braun, H. I and Holland, P. W. (1982). Observed-score test equating: A mathematical analysis of some ETS equating procedures. In P. W. Holland and D.B. Rubin (Ed.), Test equating (s. 9-49). New York: Academic Press.
  5. Beguin, A. A., & Hanson, B. A. (2001). Effect of noncompensatory multidimensionality on separate and concurrent estimation in IRT observed score equating. Paper presented at the The Annual Meeting of the National Council on Measurement in Education, Seattle, WA. Bökeoğlu, Ö., Uçar, A. ve Balta, E. (2022). Investigation of Scale Transformation Methods in True Score Equating Based on Item Response Theory. Ankara Üniversitesi Eğitim Bilimleri Fakültesi Dergisi. 55(1), 1-36.
  6. Brossman, B. G. (2010). Observed score and true score equating procedures for multidimensional item response theory (Doctoral dissertation). University of Iowa, Iowa. Chalmers, R. P. (2012). Mirt: A multidimensional item response theory package for the R environment. Journal of Statistical Software, 48, 1-29.
  7. Chu, K. L. & Kamata, A. (2003). Test equating with the presence of DIF. Paper presented at the annual meeting of American Educational Research Association, Chicago. Crocker, L., and Algina, J. (1986). Introduction to classical and modern test theory. New York: Holt, Rinehart & Winston. Dorans, N. J., & Holland, P. W. (2000). Population invariance and the equatability of tests: basic theory and the linear case. Journal of Educational Measurement, 37(4), 281-306.
  8. Gibbons, R. D., Immekus, J., and Bock, R. D. (2007). Didactic workbook: The added value of multidimensional IRT models. National Cancer Institute Technical Report. Gök, B. ve Kelecioğlu, H. (2014). Comparison of IRT Equating Methods Using the Common-Item Nonequivalent Groups Design. Mersin Üniversitesi Eğitim Fakültesi Dergisi, 10(1), 120-1