SavedAdd your journal

Journals / Kuram ve Uygulamada Eğitim Bilimleri / 2009 / Cilt: 9 - Sayı: 1

The Use of Analytic Rubric in the Assessment of Writing Performance -Inter-Rater Concordance Study-

Yazma Performansını Değerlendirmede Çözümleyici Puanlama Yönergesi Kullanımı -Değerlendirmeciler Arası Uyum Araştırması-

LATİF BEYRELİ
GÖKHAN ARI
Pages
85–125
DOI
—
🏛️Bibliographic metadata and full text access for this article are provided via DergiPark.
DergiPark Record ↗
✨

AI Summary & Key Takeaways

AI Insight
⚡ TL;DR(Too Long; Didn't Read)

It was determined that the concordance among raters was suff icient according to the results of the assessment.

📌 3 Key Takeaways

🎯
Objective & Hypothesis:In this study, the purpose was determine whether there was concordance among raters in the assessment of the writing performance using analytic rubric; furthermore, factors aff ecting the assessment process were examined.
📊
Key Findings & Data:The basis of the study is composed of narrative texts written by 200 students studying at the sixth and seventh grades of schools located on the Anatolian side of Istanbul (i.e., Beykoz, Kadikoy, Umraniye, and Uskudar).
💡
Conclusion & Impact:It was determined that the concordance among raters was suff icient according to the results of the assessment.
🔬Design:Research Article
📍Scope:Comprehensive Sample
⚙️Variables:İstanbul · Istanbul

Abstract

In this study, the purpose was determine whether there was concordance among raters in the assessment of the writing performance using analytic rubric; furthermore, factors aff ecting the assessment process were examined. The analytic rubric used in the study consists of three sections and ten properties: External structure (format, spelling and punctuation), language and expression (vocabulary, sentences, paragraphs, and expression), organization (title, introduction, story, and conclusion). The basis of the study is composed of narrative texts written by 200 students studying at the sixth and seventh grades of schools located on the Anatolian side of Istanbul (i.e., Beykoz, Kadikoy, Umraniye, and Uskudar). Texts were assessed in accordance with the analytic rubric by six raters. It was determined that the concordance among raters was suff icient according to the results of the assessment.

Özet

Bu araştırmada çözümleyici puanlama yönergesine (analytic rubric) göre yapılan yazma performansının değerlendirilmesinde, değerlendirmeciler arasında uyum olup olmadığı belirlenmeye çalışılmış; ayrıca değerlendirme sürecini etkileyen faktörler incelenmiştir. Araştırmada kullanılan çözümleyici puanlama yönergesi üç bölüm ve on özellikten oluşmaktadır: Dış yapı (biçim, yazım ve noktalama), dil ve anlatım (sözcükler, cümleler, paragrafl ar, anlatım), düzenleme (başlık, serim, düğüm, çözüm). Çalışmanın temelini, İstanbul Anadolu yakasındaki (Beykoz, Kadıköy, Ümraniye, Üsküdar) okullarda altıncı ve yedinci sınıfta öğrenim gören iki yüz öğrencinin oluşturduğu öyküleyici metinler teşkil etmektedir. Metinler altı değerlendirmeci tarafından çözümleyici puanlama yönergesine göre değerlendirilmiştir. Değerlendirme sonuçlarına göre değerlendirmeciler arası uyumun yeterli olduğu belirlenmiştir.

🔖

Cite This Article

BEYRELİ, L., ARI, G. (2009). The Use of Analytic Rubric in the Assessment of Writing Performance -Inter-Rater Concordance Study-. Kuram ve Uygulamada Eğitim Bilimleri, Cilt: 9 - Sayı: 1, 85–125. https://ajindex.com/articles/346449

References (10)

  1. Aker, S., Dündar, C. & Peşken, Y. (2005). Ölçme araçlarında iki yaşamsal kavram: Geçerlik ve güvenirlik. Ondokuz Mayıs Üniversitesi Tıp Dergisi, 22 (1), 50-60.
  2. Arter, J. A., Spandel, V., Culham, R., & Pollard, J. (1994, April). Th e impact of training students to be self-assessors of writing. Annuals Meeting of the American Educational Research Association. (ERIC Document Reproduction Service No. 370975). Babin, E., & Harrison, K. (1999). Contemporary composition studies a guide to theorist&terms. Portsmouth: Grenwood Publishing. Bilgin, N. (1995). Sosyal psikolojide yöntem ve pratik çalışmalar. İstanbul:
  3. Sistem Yayıncılık. Cohen, L., & Manion, L. (1994). Research methods in education (4th ed.). Newyork: Routledge. Crehan, K. D. (1997). A discussion of analytic scoring for writing performance assessments. Annual Meeting of the Arizona Educational Research Association. (ERIC Document Reproduction Service No. ED 414336). Elbow, P. (2000). Everyone can write essays toward a hopeful theory of writing and teaching writing. New York: Oxford Universiy Press.
  4. Gunning, T. G. (2006). Assessing and correcting reading and writing diff iculties (3th ed.). Boston: Pearson Education Inc. Karasar, N. (2002). Bilimsel araştırma yöntemi (11. basım). Ankara:
  5. Nobel Yayın Dağıtım. Legendre, P. (2005). Species associations the kendall coeff icient of concordance revisited. JABES, 10 (2), 226-245.
  6. Malvern, D., & Skidmore, D. (2001). Measuring value consensus among teachers in respect of special educational needs. Educational Studies, 27 (1), 17-29.
  7. Martin-Kniep, G. O. (2000). Becoming a beter teacher: Eight innovations that work. Alexandria: Association for Supervision & Curriculum Development. MEB Talim ve Terbiye Kurulu Başkanlığı (2006). İlköğretim Türkçe Dersi (6, 7, 8. Sınıfl ar) Öğretim Programı. Ankara: Millî Eğitim Basımevi. MEB Talim ve Terbiye Kurulu Başkanlığı (2007). Millî Eğitim Bakanlığı İlköğretim Kurumları Yönetmeliğinde Değişiklik Yapılmasına Dair Yönetmelik. Tebliğler Dergisi, 2600, 614-620.
  8. Powers, P. J., & Harris, L. B. (1991). Concordance of teacher education faculty perspectives of the knowledge base during its development. Paper presented at annual meeting of the Northern Rocky Mountain Educational Research Association. (ERIC Document Reproduction Service No. ED 377175). Saruhan, Ş. C. & Özdemirci, A. (2005). Bilim, felsefe ve metodoloji-araştırmada yöntem problemi (SPSS uygulamalı). İstanbul:
  9. Alkım Yayınevi.
  10. Sigler, E. A., & Tallent-Runnels, M. K. (2006).