An investigation of item bias in science & tecnology subtests and mathematic subtest in level determination exam (LDE)

Seviye belirleme sınavındaki fen ve teknoloji ile matematik alt testlerinin madde yanlılığı açısından incelenmesi

Abstract

The aim of this study is to determine the items in Science and Technology and Mathematics subtests of 6th, 7th, and 8th grades in the 2009 LDE, which was performed to select the students for the secondary schools, exhibited item bias with regard to student gender. Mantel-Haenszel (MH) method was used in order to determine the differential item functioning (DIF) of the items in the tests. The study was carried out with 22624 students in total, 6913 of whom were 6th year students (3614 males and 3299 females), 6333 of whom were 7th year students (3277 males and 3066 females) and 9374 of whom were 8th year students (4290 males and 5084 females). When the Science and technology subtest items are examined, it is seen that 2 (items number 6 and 16) in 6th grade, 3 in 8th grade (item number 14, 15, and 17) tests have B-level DIF. Among those five items 3 are favoring girls and 2 are favoring boys. In Mathematics subtests, item number 3 in 6th grade, item number 3 in 7th grade, and items 2 and 6 in 8th grade have DIF at B level. While 3 of those items work in favor of males, remaining 1 item works in favor of females. Content experts are asked for their opinion on the items having DIF to explore if any of them are biased. Based on the expert reviews it has been concluded that none of them includes gender bias.

Özet

Bu çalışmanın amacı, 2009 yılı Seviye Belirleme Sınavı (SBS) içerisindeki fen ve teknoloji alt testleri ile matematik alt testlerindeki maddelerin öğrencilerin cinsiyetine göre madde yanlılığı gösterip göstermediğini belirlemektir. Bu amaç doğrultusunda testler içerisinde değişen madde fonksiyonlarına (DMF) sahip maddeler Mantel- Haenszel (MH) yöntemi kullanılarak belirlenmiştir. DMF gösteren maddelerin cinsiyete göre madde yanlılığı taşıyıp taşımadığını belirlemek için alan uzmanları ile ölçme ve değerlendirme uzmanlarının görüşlerine başvurulmuştur. Araştırma; 6913 (3614 erkek, 3299 kız) 6.sınıf, 6333 (3277 erkek, 3066 kız) 7.sınıf ve 9374 (4290 erkek ve 5084 kız) 8.sınıf olmak üzere toplam 22624 öğrenci üzerinde yürütülmüştür. Araştırmada elde edilen bulgular doğrultusunda, fen ve teknoloji alt testler göz önüne alındığında, 6.sınıf SBS'de 2 madde (6 ve 16), 8. Sınıf SBS'de 3 madde (14, 15, 17) B düzeyinde DMF içermektedir. Fen ve teknoloji alt testlerinde DMF gösteren 5 maddenin 3'ü kızlar lehine, 2'si ise erkekler lehine işlemektedir. Matematik alt testlerine bakıldığında ise 6. Sınıf SBS'de 1 madde (3), 7.sınıf SBS'de 1 madde (3) ve 8. Sınıf SBS'de ise 2 madde de (2 ve 6) B düzeyinde DMF bulunmuştur. 6.7. ve 8. Sınıf SBS matematik alt testlerinde DMF gösteren 4 maddeden 3'ü erkekler, 1'i kızlar lehine çalışmaktadır. Fen ve teknoloji ile matematik alt testlerinde DMF gösteren maddelerin, madde yanlılığı gösterip göstermediğini belirlemek amacıyla uzmanların görüşlerine başvurulmuştur. Uzmanların görüşlerine göre maddelerdeki DMF'lerin madde yanlılığı oluşturmadığı sonucuna ulaşılmıştır.