Basit doğrusal regresyonda sağlam ve theil kestiricilerinin karşılaştırılması

Basit doğrusal regresyon çözümlemesinde varsayımlar sağlandığında elde edilen en küçük kareler(EKK) kestirim değerleri, Gauss-Markov teoremine göre parametrelerinin doğrusal, yansız ve en küçük varyanslı kestiricileridir. Ancak, varsayımlar sağlanmadığında elde edilen kestiriciler, olması gereken özelliklerini kaybederler. Bu durumda regresyon çözümlemesinde alternatif olarak bazı parametrik olmayan ya da sağlam yöntemler kullanılır. Parametrik olmayan regresyon yöntemleri, hata dağılımına ilişkin normallik varsayımı gerektirmezler. Theil kestirimi, örneklemde aykırı değerler bulunduğunda sağlam sonuçlar vermektedir (Nevitt, J., Tam, H. P., 1998). Sağlam regresyon ise yine regresyon çözümlemesinde gerekli olan varsayımlar sağlanmadığında, olağan en küçük kareler yöntemine alternatif olarak önerilen bir yöntemdir. Bu çalışmada, basit doğrusal regresyonda aykırı değer varlığında sağlam regresyon yöntemler olan ortanca en küçük kareler(OEKK), en küçük kesilmiş kareler(EKKK), Huber'in M kestiricisi ve parametrik olmayan Theil regresyonu yöntemini karşılaştırmak için bir benzetim çalışması yapılmıştır. Elde edilen sonuçlar göreli etkinliklerine göre karşılaştırılmış ve yorumlanmıştır. Benzetim sonuçlarına göre sağlam yöntemden elde edilen kestiricilerin, Theil yönteminden elde edilen kestiricilere göre daha etkin sonuçlar verdiği görülmüştür.

Aykırı değer ,

Basit doğrusal regresyon ,

Robust regresyon ,

Theil yöntemi ,

According to Gauss-Markov Theorem, ordinary least squares (OLS) estimates are best linear unbiased estimators when the assumptions are satisfied in simple linear regression. However, these estimates in regression models are not resistant to deviations from classical assumptions. In this situation, some nonparametric or robust methods are used as alternatives in regression analysis. Nonparametric statistical methods require no normality assumption about the error distribution. Theil's estimator gives robust results when outliers are present in the sample (Nevitt, J., Tam, H. P., 1998). Robust methods are also alternative methods to ordinary least square estimates when the necessary assumptions in regression analysis are not satisfied. In this study, the robust methods of median least squares (MLS), least squares, Huber's M estimator and nonparametric Theil's regression method are compared by performing a simulation study for simple linear regression model when data consist of outliers. The performances of estimators are compared and interpreted with respect to their efficiency. According to simulation results, estimators obtained from robust methods provide more efficient results than the ones obtained from Theil's method.

Outliers, ,

Robust regression, ,

Simple linear regression, ,

Theil’s method ,