Computerized Adaptive Testing for Student Selection to Higher Education

Yükseköğretime öğrenci seçmek için bilgisayar ortamında bireyselleştirilmiş testler

Abstract

The purpose of the present study is to discuss applicability of computerized adaptive testing format as an alternative for current student selectionexaminations to higher education in Turkey. In the study, first problemsassociated with current student selection system are given. These problems exerts pressure on students that results in test anxiety, producemeasurement experiences that can be criticized, and lessen credibility ofstudent selection system. Next, computerized adaptive test are introducedand advantages they provide are presented. Then results of a study thatused two research designs (simulation and live testing) were presented.Results revealed that (i) computerized adaptive format provided a reduction up to 80% in the number of items given to students compared topaper and pencil format of student selection examination, (ii) ability estimations have high reliabilities. Correlations between ability estimationsobtained from simulation and traditional format were higher than 0.80.At the end of the study solutions provided by computerized adaptive testing implementation to the current problems were discussed. Also someissues for application of CAT format for student selection examinationsin Turkey are given.

Özet

Bu çalışmanın amacı bilgisayar ortamında bireyselleştirilmiş test formatınınTürkiye'deki yükseköğretime öğrenci seçme sınavlarına alternatif olarak kullanılabilirliğini tartışmaktır. Çalışmada, önce mevcut öğrenci seçme sistemindeki sorunlar ortaya konmaktadır. Mevcut sınav sistemi öğrencilerinüzerinde büyük bir baskı yaratmakta, ölçme-değerlendirme bakımından eleştiriye açık unsurlar içermekte ve sistemin kamuoyu tarafından eleştirilmesine neden olmaktadır. Bunun ardından bilgisayar ortamında bireyselleştirilmiş testlerin dayandığı temel prensipler ve sağladıkları avantajlar açıklanmakta ve Türkiye'deki öğrenci seçme sınavlarının bu formatta uygulanabilirliğini araştıran deneysel bulgular paylaşılmaktadır. Daha sonra ise, iki farklıaraştırma deseni (simülasyon ve gerçek birey uygulaması) kullanan bir çalışmanın sonuçları paylaşılmaktadır. Sonuçlar (i) bilgisayar ortamında bireyselleştirilmiş formatın öğrenci seçme sınavının kağıt kalem formatı ile karşılaştırıldığında öğrencilere sorulan soru sayısında %80'e varan düşüşler sağladığını ve (ii) yetenek kestirimlerinin yüksek güvenilirliğe sahip olduğunu ortaya koymaktadır. Bireylerin klasik öğrenci seçme sınavlarından elde edilen yetenek kestirimleri ile CAT simulasyonlarından gelen kestirimleri arasındakikorelasyonlar 0.80'in üzerinde bulunmuştur. Gerçek bireyler ile yapılanCAT uygulaması da umut verici bulgular ortaya koymuştur. Çalışmanın sonunda bilgisayar ortamında bireyselleştirilmiş testlerin öğrenci seçme sistemikullanımının mevcut sorunlara nasıl çözüm getirdiği tartışılmış, ayrıca bireyselleştirilmiş formata geçiş konusunda bir takım noktalara değinilmiştir.