Results of misusage of nonparametric methods: a simulation study

Parametrik olmayan yöntemlerin yanlış kullanımı ve doğurabileceği sonuçlar: simülasyon çalışması

Didem Havva OVLA,Merve TÜRKEGÜN,Ayça Asena ÖZDEMİR,Bennu Vedia ÖZCÖMERT,Bahar TAŞDELEN

Abstract

Purpose: Visual Analogue Scale has a narrow range which is used to evaluate the pain severity. In general, such type of data don’t provide the parametric test hypothesis. But at the group comparisons the number of outlier could be excessive at one of the groups. Consequently, it is analyzed by using non-parametric methods. Therefore, in this study as comparing two groups which are narrow ranged rates and also have outliers (skew) it has been aimed that evaluating the performance of Student t test, Logistic transformed Student t test, Mann Whitney-U test and Mood’s Median tests. Material and Methods: The study was planned as a simulation study. Accordingly, it has been formed distributions which are at interval of 0-10, based on the mostly used Visual Analogue Scale rates which were used in evaluation of pain. Simulations were repeated 1000 times for 20 combinations which consisted of 4 different distributions and 5 different sample size. Results: Type I error rates which obtained have varied as the sample size and the distribution type is changed and the test results haven't been changed though normalization method used in the type of data that is not concordance with normal distribution.Conclusion: Misusing and overusing of non-parametric tests gives biased results in scientific studies. Although the general approach was using non-parametric tests in which datas were recorded at the interval of 0-10 cm, the simulation study showed that such datas could also be evaluated by using parametric tests

Özet

Amaç: Ağrı şiddetinin değerlendirilmesinde sıkça kullanılan Görsel Analog Skala dar aralığa sahiptir. Genellikle bu tip veriler parametrik test varsayımlarını sağlamaz. Grup karşılaştırmalarında ise grupların birinde aykırı değer sayısı fazla olabilir. Bu sebeplerle parametrik olmayan yöntemler kullanılarak analiz edilir. Buradan yola çıkarak, bu çalışmada dar aralıklı (range) ve aynı zamanda aykırı değerlere sahip (çarpık) iki grubun karşılaştırılmasında Student t testi, Logit dönüşümü yapılmış Student t testi, Mann Whitney U testi ve Mood’s medyan testinin performansları değerlendirilmesi amaçlanmıştır. Gereç ve Yöntem: Çalışma bir simülasyon çalışması olarak planlanmıştır. Bu doğrultuda, ağrı değerlendirmesinde en sık kullanılan Görsel Analog Skala değerleri temel alınarak, 0-10 aralığında dağılımlar türetilmiştir. Simülasyonlar dört farklı dağılım ve 5 farklı örnek genişliğinden oluşan 20 kombinasyon için 1000’er kez tekrarlanmıştır.Bulgular: Elde edilen tip I hata oranları örnek genişliği ve dağılım tipi değiştikçe farklılık göstermiştir. Ayrıca normal dağılıma uyumlu olmayan veri tipinde normalizasyon metodu kullanılsa bile test sonuçlarının değişmediği görülmüştür. Sonuç: Parametrik olmayan testlerin uygun olmayan (misusing) ve gereksiz kullanımı (overusing) bilimsel çalışmalarda yanlı sonuçlar doğurmaktadır. Ölçek verilerinin 0-10 cm aralığında kaydedildiği çalışmalarda genel yaklaşım parametrik olmayan testlerin kullanılması olmakla beraber, yaptığımız simülasyon çalışması bu tip verilerin parametrik testlerle de değerlendirilebileceğini göstermektedir.