AI Summary & Key Takeaways
AI InsightThese findings suggest opportunities to strengthen assessment validity by expanding well-designed case-based and visual-supported items, which may better promote clinical reasoning and visual literacy within dental education.
📌 3 Key Takeaways
Abstract
ABSTRACT Objectives: This study examined the content characteristics and cognitive-level demands of Oral and Maxillofacial Surgery (OMFS) questions in the Turkish Dental Specialty Examination (DUS; Diş Hekimliğinde Uzmanlık Sınavı), with the goal of informing candidate preparation and curriculum–assessment alignment in dental education. Materials and Methods: A retrospective, cross-sectional, descriptive item analysis was conducted using publicly available DUS question booklets from Spring 2012 to Spring 2025. After excluding officially annulled questions (n=2), 188 OMFS items were analyzed. Items were coded by topic, item format (knowledge-based vs case-based), presence of visual material, and Bloom-based cognitive level (Level 1–3, based on the highest cognitive process required). Inter-rater reliability was assessed on a random subset of 50 questions (Cohen’s κ=0.8677). Results: Lower-order cognitive demand predominated across periods. Level 2 (Apply/Analyze) questions increased from 9.4% (2012–2022) to 20.0% (2023–2025) and were consistently case-based; however, this shift did not reach statistical significance (OR=2.40, p=0.075, 95% CI: 0.98–5.90). Visual items were rare in 2012–2022 (5/138; 3.62%) and absent in 2023–2025 (0/50). Topic coverage showed redistribution over time, indicating changing examination emphasis. Conclusion: DUS–OMFS assessment remains heavily weighted toward remembering/understanding, with limited representation of higher-order clinical reasoning and minimal use of clinically relevant visuals. These findings suggest opportunities to strengthen assessment validity by expanding well-designed case-based and visual-supported items, which may better promote clinical reasoning and visual literacy within dental education.
Özet
ÖZET Amaç: Bu çalışma, Türkiye’de Diş Hekimliğinde Uzmanlık Sınavı’nda (DUS) yer alan Ağız, Diş ve Çene Cerrahisi (ADÇC/OMFS) sorularının içerik özelliklerini ve bilişsel düzey gereksinimlerini inceleyerek; aday hazırlığını ve diş hekimliği eğitiminde müfredat–ölçme/değerlendirme uyumunu desteklemeyi amaçlamıştır. Gereç ve Yöntemler: İlkbahar 2012–İlkbahar 2025 dönemine ait, kamuya açık DUS soru kitapçıkları kullanılarak retrospektif, kesitsel ve tanımlayıcı madde analizi yürütülmüştür. Resmî olarak iptal edilen sorular (n=2) dışlandıktan sonra 188 ADÇC maddesi analiz edilmiştir. Sorular; konu başlığı, madde formatı (bilgi temelli vs olgu/vaka temelli), görsel materyal varlığı ve Bloom temelli bilişsel düzey (en yüksek bilişsel süreç esas alınarak Düzey 1–3) açısından kodlanmıştır. Değerlendiriciler arası uyum, rastgele seçilen 50 soru üzerinde Cohen’s κ=0,8677 olarak saptanmıştır. Bulgular: Dönemler boyunca düşük düzey bilişsel talep baskın bulunmuştur. Düzey 2 (Uygulama/Analiz) sorularının oranı 2012–2022’de %9,4 iken 2023–2025’te %20,0’ye yükselmiş ve bu sorular tutarlı biçimde vaka temelli olmuştur; ancak bu artış istatistiksel anlamlılığa ulaşmamıştır (OR=2,40; p=0,075; %95 GA: 0,98–5,90). Görsel içeren sorular 2012–2022 döneminde nadir görülmüş (5/138; %3,62) ve 2023–2025 döneminde hiç yer almamıştır (0/50). Konu kapsamı zaman içinde yeniden dağılım göstermiş ve sınavın vurgu alanlarında değişime işaret etmiştir. Sonuç: DUS–ADÇC değerlendirmesi, ağırlıklı olarak hatırlama/anlama düzeyinde kalmakta; daha üst düzey klinik akıl yürütmeyi sınırlı ölçüde temsil etmekte ve klinik açıdan anlamlı görselleri asgari düzeyde kullanmaktadır. Bu bulgular, iyi tasarlanmış vaka temelli ve görsel destekli maddelerin artırılmasıyla ölçme geçerliğinin güçlendirilebileceğini; bunun da diş hekimliği eğitiminde klinik akıl yürütme ve görsel okuryazarlığı daha iyi destekleyebileceğini düşündürmektedir.