Journals / Hacettepe Üniversitesi Eğitim Fakültesi Dergisi / 2016 / Cilt: 31 - Sayı: 1

Investigation of Concept Map Scores' Reliability: Example of Crossed Mixed Design in Generalizability Theory

Kavram Haritası Puanlarının Güvenirliğinin İncelenmesi: Genellenebilirlik Kuramında Çaprazlanmış Karışık Desen Örneği

Pages
97–111
Publication Date
2022-10-19
DOI
—
🏛️Bibliographic metadata and full text access for this article are provided via DergiPark.
DergiPark Record ↗
✨

AI Summary & Key Takeaways

AI Insight
⚡ TL;DR(Too Long; Didn't Read)

On the other hand, this current research is different from the generalizability studies available in literature in that it includes the mixed design sample, and therefore, it is believed to be important.

📌 3 Key Takeaways

🎯
Objective & Hypothesis:This study investigates the parameters obtained through the generalizability theory which measures the topic "basic concepts related with measurement and evaluation" in the measurement and evaluation course.
📊
Key Findings & Data:Data for the research were collected from 91 (49 girls 42 boys) students who are studied in the Sakarya Unıversity science education department in 2011-2012 semester.
💡
Conclusion & Impact:On the other hand, this current research is different from the generalizability studies available in literature in that it includes the mixed design sample, and therefore, it is believed to be important.
🔬Design:Research Article
📍Scope:2011-2012 Verileri
⚙️Variables:Domain Parameters

Abstract

This study investigates the parameters obtained through the generalizability theory which measures the topic "basic concepts related with measurement and evaluation" in the measurement and evaluation course. Data for the research were collected from 91 (49 girls 42 boys) students who are studied in the Sakarya Unıversity science education department in 2011-2012 semester. The o (student), X m (item) X h (map) were crossed in the study, and due to the fact that the item facet was random but the map facet was fix, the mixed design was used. The variances of the results obtained with filling concept maps and the percentages of explaining the total variances were researched with the G study and with the C and S techniques; and the changes in the G and Phi coefficients were researched by increasing and decreasing the item numbers with the D study. With this study, we aimed to exemplify the preferability compared to the classical test theory in having reliability of the concept map by leaning on the power, suitability and flexibility of the G theory. On the other hand, this current research is different from the generalizability studies available in literature in that it includes the mixed design sample, and therefore, it is believed to be important.

Özet

Bu çalışmada ölçme ve değerlendirme dersinin "Ölçme ve Değerlendirmeyle İlgili Temel Kavramlar" konusunu ölçen iki farklı doldurma kavram haritası tekniğinin genellenebilirlik kuramı ile elde edilen parametreleri araştırılmıştır. Araştırma verileri, 2012-2013 Öğretim Yılı'nda Sakarya Üniversitesi Psikolojik Danışmanlık ve Rehberlik Bölümü 3. sınıfta okuyan 49'u (%53,8) kız 42'si (%46,2) erkek toplam 91 öğrenciden elde edilmiştir. Çalışmada o (öğrenci) x m (madde) x h (harita) çaprazlanmış ve yüzeylerden madde yüzeyi rastgele, harita yüzeyi ise sabit olmak üzere karışık desen kullanılmıştır. Yapılan G çalışması ile oxmxh deseninde var olan varyans kaynaklarının varyans değerleri ve toplam varyansları açıklama yüzdeleri elde edilmiştir. K çalışması ile madde sayılarının arttırılması ve azaltılmasıyla G ve Phi katsayılarındaki değişim araştırılmıştır ve madde sayısı arttırıldıkça G ve Phi katsayılarında da artış olduğu gözlenmiştir. Bu çalışma ile genellenebilirlik kuramının gücü, elverişliliği ve esnekliğine dayanarak kavram haritası puanlama güvenirliğinin elde edilmesinde klasik test kuramına göre tercih edilir olabileceği örneklendirilmeye çalışılmıştır. Diğer yandan bu çalışma, içerdiği karışık desen örneği ile literatürde yer alan genellenebilirlik çalışmalarından farklılaşmıştır ve bu nedenle önemli olduğu düşünülmektedir.

🔖

Cite This Article

UYANIK, G. K., GÜLER, N. (2022). Investigation of Concept Map Scores' Reliability: Example of Crossed Mixed Design in Generalizability Theory. Hacettepe Üniversitesi Eğitim Fakültesi Dergisi, Cilt: 31 - Sayı: 1, 97–111. https://ajindex.com/articles/531803

📄 Full Text PDF Viewer

📄

PDF görüntüleyici hazırlanıyor...

References (11)

  1. Acton, W., H., Johnson, P. J., & Golldsmith, T. E. (1994). Structural knowledge assessment: Comparison of referent structures. Journal of Educational Psychology, 86, 303-311.
  2. Altıntaş, G. ve Altıntaş, S. U. (2008). İlköğretim 5. sınıf sosyal bilgiler dersinde "kavram haritası" kullanımının öğrenci akademik başarısı üzerindeki etkisi. Kastamonu Eğitim Dergisi, 16(1), 61-66.
  3. Ausubel, D. P. (1968). Educational psychology: A cognitive view. New York, Holt, Rinehart and Winston. Anderson, T. H., & Huang, S. C. C. (1989). On using concept maps to assess the comprehension effects of reading expository text (No. 483). Urbana-Champaign: Center for the Studying of Reading, University of Illinois at Urbana-Champaign. Baker, E. L., Niemi, D., Novak, J. D., & Herl, H. (1991, July). Hypertext as a strategy for teaching and assessing knowledge representation. Paper presented at the NATO Advanced Research Workshop on Instructional Design Models for Computer-Based Learning Environments, The Netherlands. Baykul, Y. (2000). Eğitimde ve psikolojide ölçme: Klasik test teorisi ve uygulaması. Ankara:
  4. ÖSYM Yayınları.
  5. Brennan, R. L. (2001). Generalizability theory. New York: Springer-Verlag. Brennan, R. L. (1992). Elements of generalizability theory. New York: Springer-Verlag. Cronbach, L. J., Gleser, G. C., Nanda, H., & Rajaratnam, N. (1972). The dependability of behavioral measurements: theory of generalizability of scores and profiles. New York: John Wiley. Eason, S. H. (1989). Why generalizability theory yields better results than classical test theory. Mid- South Educational Research Association Annual Meeting: 8-10 November 1989-
  6. Little Rock, AR. Goodwin, L. D. (2001). Interrater agreement and reliability. Measurement in Psychical Education and Exercises Science, 5 (1), 13-14.
  7. Güler, N. (2008). Klasik test kuramı, genellenebilirlik kuramı ve rasch modeli üzerine bir araştırma. Yayınlanmış doktora tezi, Hacettepe Üniversitesi,
  8. Ankara.
  9. Güler, N., Uyanık, K. G. ve Teker, T. G. (2012). Genellenebilirlik kuramı. PegemA Yayıncılık. Ankara.
  10. Herl, H. E., O'Neil, H. F., Chung, G. K. W. K., & Schacter, J. (1999). Reliability and validity of a computer-based knowledge mapping system to measure content understanding. Computer in Human Behavior, 15, 315-333.
  11. Lay-Dopyera, M., & Beyerbach, B. (1983). Concept mapping for individual assessment. Syracuse, NY: School of Education, Syracuse University. Lomask, M., Baron, J. B., Greig, J., & Harrison, C. (1992). ConnMap: Connecticut's use of con