AI Summary & Key Takeaways
AI InsightThe findings indicate that AutoGluon achieved the highest performance, owing to its automated modeling and ensemble-based approach.
📌 3 Key Takeaways
Abstract
The increasing complexity and critical nature of cyber threats have heightened the importance of effective attack detection systems. In this study, various machine learning algorithms (SVM, KNN, Logistic Regression, Random Forest, XGBoost), deep learning models (CNN, LSTM, DNN), and the AutoML-based AutoGluon framework are systematically compared for multi-class network attack detection. The experiments utilize the UNSW-NB15 dataset. Due to the imbalanced class distribution in the dataset, class balancing was applied in certain analyses using the SMOTE technique. All models were evaluated using commonly adopted classification metrics, including Accuracy, Precision, Recall, F1-score, and ROC-AUC. The findings indicate that AutoGluon achieved the highest performance, owing to its automated modeling and ensemble-based approach. These results suggest that automated modeling techniques may offer greater competitiveness and effectiveness compared to traditional methods. By systematically analyzing the performance of different modeling strategies in intrusion detection systems, this study aims to provide guidance for the development of future security solutions.
Özet
Siber tehditlerin artan karmaşıklığı ve kritik doğası, etkili saldırı tespit sistemlerinin önemini artırmıştır. Bu çalışmada, çok sınıflı ağ saldırısı tespiti için çeşitli makine öğrenmesi algoritmaları (SVM, KNN, Lojistik Regresyon, Rastgele Orman, XGBoost), derin öğrenme modelleri (CNN, LSTM, DNN) ve AutoML tabanlı AutoGluon çerçevesi sistematik olarak karşılaştırılmıştır. Deneylerde UNSW-NB15 veri seti kullanılmıştır. Veri setindeki dengesiz sınıf dağılımı nedeniyle, bazı analizlerde SMOTE tekniği kullanılarak sınıf dengesi sağlanmıştır. Tüm modeller, Doğruluk, Kesinlik, Duyarlılık, F1-skoru ve ROC-AUC gibi yaygın sınıflandırma ölçütleri kullanılarak değerlendirilmiştir. Elde edilen bulgular, AutoGluon’un otomatik modelleme ve topluluk (ensemble) tabanlı yaklaşımı sayesinde en yüksek performansı sağladığını ortaya koymuştur. Bu sonuçlar, otomatik modelleme tekniklerinin geleneksel yöntemlere kıyasla daha rekabetçi ve etkili olabileceğini göstermektedir. Çalışma, saldırı tespit sistemlerinde farklı modelleme stratejilerinin performansını sistematik olarak analiz ederek, gelecekteki güvenlik çözümlerinin geliştirilmesine yönelik yol gösterici olmayı amaçlamaktadır.