Item-Person Parameters Distribution and Differential Item Functioning Analysis of International Computer and Information Literacy Test

Uluslararası Bilgisayar ve Bilgi Teknolojileri Okuryazarlığı Testinin Madde-Birey Dağılımı ve Değişen Madde Fonksiyonu Yönünden İncelenmesi

Abstract

The aim of International Computer and Information Literacy Study (2013) is to investigate difference in computer and information literacy (CIL) ability of young students between participant countries, factors that affect CIL and roles of education systems and schools in development of CIL. The data of ICILS are gathered using international computer and information technologies test for students, teacher and principal questionnaires. The purpose of the current study is to compare the distribution of difficulty parameters of CIL test items in module pairs with ability parameter of students and examine items in terms of differential item function (DIF). The research is based on the data of 5606 eight grade students from Turkey and Czech Republic. In this research generalized Mantel-Haenszel and standardization methods are conducted to detect DIF. Almost all module pairs show some insufficiency in containing adequate items that measure low ability levels in Turkey sample. Many items in two modules show significant DIF. In general items that show DIF provide advantage to Check Republic.

Özet

2013 yılında yapılan Uluslararası Bilgisayar ve Bilgi Teknolojileri Okuryazarlığı Çalışması’nda (ICILS) sekizinci sınıf öğrencilerinin bilgisayar ve bilgi okuryazarlığı ulusal ve uluslararası düzeyde incelenmiştir. ICILS’in verilerinin toplanmasında öğrenciler için uluslararası bilgisayar ve bilgi teknolojileri testi, öğrenci anketi, öğretmen anketi, okul yöneticisi anketi, koordinatör anketi ve ulusal eğitim sistemlerine ilişkin ulusal anket kullanılmıştır. Bu çalışmanın amacı uluslararası öğrenciler için bilgisayar ve bilgi teknolojileri okuryazarlığı testindeki modül çiftlerinin ölçtüğü yetenek düzeyleri ile Türkiye ve Çek Cumhuriyeti öğrencilerinin yetenek düzeylerinin dağılımlarını karşılaştırmak ve modüllerdeki maddeleri değişen madde fonksiyonu (DMF) bakımından incelemektir. Araştırmanın çalışma grubunu Çek Cumhuriyeti ve Türkiye’den ICILS’e katılan toplam 5606 sekizinci sınıf öğrencisi oluşturmaktadır. Değişen madde fonksiyonu genelleştirilmiş Mantel-Haenszel ve standartlaştırma yöntemleri ile incelenmiştir. Araştırma sonucunda modül çiftlerinin tüm yetenek düzeylerine uygun madde bulundurma konusunda sınırlılıklarının olduğu belirlenmiştir. Ayrıca modüllerin hepsinde farklı düzeylerde DMF gösteren maddeye rastlanılmıştır. DMF gösteren maddelerin genellikle Çek Cumhuriyeti örneklemine avantaj sağladığı tespit edilmiştir.