İşaretleme ve angoff standart belirleme yöntemlerinin karşılaştırılması

Özet

Bu araştırmada, bir vakıf üniversitesinin yeterlik sınavının kesme puanı, standart belirleme yöntemlerinden işaretleme yöntemi ve Angoff yöntemi ile tekrar hesaplanmış ve bulunan kesme puanları mevcut yeterlik pu- anı ile karşılaştırılmıştır. Angoff Yöntemi uygulanarak 17 uzman ile belirlenen nihai kesme puanı 27,83 olarak belirlenmiştir. İşaretleme yöntemine göre yapılan hesaplamalar sonucunda elde edilen kesme puanları 1PLM ve RP50 değeri için 19,242 olarak bulunurken, 1 PLM ve RP67 değeri için ise 25,247 puan; 2PLM ve RP50 değeri için 18,897 puan, 2 PLM ve RP67 değeri için ise 25,102 olarak elde edilmiştir. Angoff yönteminde uzmanların belirlediği ile gerçek veriden hesaplanan madde cevaplama olasılıkları arasındaki ilişki düzeyini görmek için uz- manların madde cevaplama olasılıkları ile gerçek madde güçlükleri arasındaki korelasyon katsayıları incelen- miş, uzmanların madde cevaplama olasılıkları ortalamaları ile gerçek madde güçlükleri arasındaki korelasyon katsayısı 0,60 olarak bulunmuştur. Üniversitenin belirlediği kesme puanı olan 35 üzerinde puan alan öğrenci yüzdesi ile işaretleme ve Angoff yöntemlerine göre belirleneni kesme puanları üzerinde puan alan öğrenci yüz- deleri arasında 0,01 düzeyinde fark olduğu; ancak cevaplama olasılıkları RP50 ve RP67ye göre ve işaretleme yöntemi ile Angoff yöntemine göre belirlenen kesme puanları üzerinde puan alan öğrenci yüzdeleri arasında ise önemli bir fark olmadığı saptanmıştır.

Abstract

In this research, the cut score of a foundation university was re-calculated with bookmark method and with Angoff method, each of which is a standard setting method; and the cut scores found were compared with the current proficiency score. Thus, the final cut score was found to be 27.87 with the cooperative work of 17 experts through the Angoff method. The cut scores derived by calculations using the bookmark method were found as 19.242 for 1 PLM and RP50, as 25.247 for 1 PLM and RP67, as 18.897 for 2 PLM and RP50, and as 25.102 for 2 PLM and RP67. Correlation coefficients are examined between probabilities of expert answers and real item difficulties to see relationship level between experts determining probability of right answers and the real dif- ficulty of the items. The correlation coefficient between experts determining probability of right answers and the real difficulty of the items is determined as 0.60. It is find that there is a significant difference between the percent of students whose score is more than qualifying score determined by the foundation university which is 35 point and the percent of students whose score is more than cut scores determined by Bookmark Method for RP50, RP67 and Angoff Method; but it is also find out that there is no significant difference between the percent of students whose score is more than cut scores determined by the Bookmark Method with RP50 and RP67; and Bookmark method and Angoff method.