Validity evidence in scale development: The application of cross validation and classification-sequencing validation

Ölçek geliştirmede geçerlik kanıtları: Çapraz geçerlik, sınıflama ve sıralama geçerliği uygulaması

Abstract

In literature, it has been observed that many enhanced criteria are limited by factor analysis techniques. Besides examinations of statistical structure and/or psychological structure, such validity studies as cross validation and classification-sequencing studies should be performed frequently. The purpose of this study is to examine cross validation and sequencing-classification validation at the same time with regard to two sub-samplings from an attitude scale concerning paranormal belief developed to guide researchers in interpreting its results. When the literature regarding scale development is taken into account, most of the scales have been developed in accordance with exploratory factor analysis. Even if the factor loads, model data conformity index, and the in- ternal consistency reliability coefficients of the measuring devices are proper, the validity of the analysis should be examined through different methods. Parameter values which test as appropriate in the examined method may be found to be inappropriate or have different clues from other analyses. Therefore, the researchers scale development should follow validity evidences through different methods.

Özet

Literatürde geliştirilmiş pek çok ölçeğin faktör analizi teknikleri ile sınırlı kaldığı gözlenmiştir. Bu ölçeklerin istatistiksel yapı ve/veya psikolojik yapı geçerliği incelemelerinin yanı sıra çapraz geçerlik, sınıflama-sıralama geçerliği gibi geçerlik çalışmalarına da sıklıkla yer verilmesi gerekmektedir. Bu araştırmanın amacı ise geliştirilen paranormal inançlara ilişkin tutum ölçeğinin bölünmüş iki alt örnekleme göre çapraz geçerliğinin, aynı zamanda sınıflama-sıralama geçerliğinin sınanması ve sonuçlarının yorumlanmasında araştırmacılara rehberlik sağlamaktır. Ölçek geliştirme ile ilgili alanyazın incelendiğinde ölçeklerin çoğunun açımlayıcı faktör anali- zi sonuçlarına göre geliştirildiği görülmektedir. Geliştirilen ölçme araçlarının faktör yükleri, model veri uyum indeksleri, iç tutarlık güvenirlik katsayıları uygun olsa da farklı yöntemlerle geçerlik analizlerinin incelenmesi gerekmektedir. İncelenen yöntemde uygun çıkan parametre değerleri, farklı bir yöntemde uygun çıkmayabilir veya farklı ipuçları gösterebilmektedir. Dolayısıyla ölçek geliştiren araştırmacının, farklı yöntemlerle geçerlik kanıtlarını sürdürmesi gerekmektedir.