Investigation of Five Nonoverlap Methods to Calculate Effect Sizes in Single-Case Research

Tek Denekli Araştırmalarda Etki Büyüklüğü Hesaplamada Kullanılan Örtüşmeyen Veriye Dayalı Yöntemlerin İncelenmesi

Abstract

Evidence-based practices (EBPs) include teaching methods and strategies aimed at improving learning outcomes of all children in schools. In recent years, movement to determine EBPs in education has expanded use of meta -analysis and led to development of effect size calculation methods in single-case experimental research (SCER). The purpose of this study was to examine five nonoverlap methods developed for effect size calculations in SCER. In this study, effect size calculations and visual analyzes were performed using five methods for each of 222 graphs obtained from SCER studies. Findings of the study revealed that four of thefive methods (IRD, Tau-U, TauNovlap, and Phi) were highly correlated with each other and there were high levels of agreement between effect size estimates calculated using these methods and visual analysis. Considering their compatibility with visual analysis, it was determined that Tau-U and IRD performed slightly better than other methods.

Özet

Bilimsel dayanaklı uygulamalar (BDU), okullarda tüm çocukların öğrenme çıktılarını iyileştirmeyi amaçlayan öğretim yöntem ve stratejilerini içermektedir. Son yıllarda, eğitim alanında BDU’ların belirlenmesine yönelik hareket, meta-analiz uygulamalarını yaygınlaştırmış ve tek denekli deneysel araştırma (TDA) gibi alanlarda etki büyüklüğü hesaplama yöntemlerin geliştirilmesine neden olmuştur. Bu çalışmanın amacı, TDA bağlamında etki büyüklüğü hesaplamaları için geliştirilen beş yöntemi (TauÖrtüşmeme, Tau-U, Phi, robust Phi ve İLOF) karşılaştırmalı olarak incelemektir. Çalışma kapsamında TDA’lardan elde edilen 222 grafiğin her biri için beş yöntem kullanılarak etki büyüklüğü hesaplamaları ile görsel analizler gerçekleştirilmiştir. Bu analizler sonucu elde edilen veriler karşılaştırılarak incelenmiştir. Araştırmanın bulguları, incelenen beş yöntemden dördünün (İLOF, Tau-U, TauÖrtüşmeme ve Phi) birbirleriyle çok yüksek düzeyde korelasyona sahip olduğunu ve bu yöntemler kullanılarak hesaplanan etki büyüklüğü değerleri ile görsel analiz sonuçları arasında yüksek düzeyde bir uyum olduğunu ortaya koymuştur. Ayrıca, görsel analiz ile uyumları dikkate alındığından Tau-U ve İLOF yöntemlerinin diğer yöntemlere kıyasla daha iyi performans gösterdiği belirlenmiştir.